Всем привет! Это Миша Степнов, руководитель центра R&D Big Data в МТС Диджитал.
Сегодня все говорят о цифровой трансформации и внедрении искусственного интеллекта в бизнес-процессы. Но многие забывают, что ИИ без данных не бываетЧитать полностью »
Рубрика «базы данных» - 5
Книги по базам данных, которые стоит прочитать в 2025 году
2025-02-23 в 8:06, admin, рубрики: базы данных, книги, учебный процесс, Учебный процесс в IT, Читальный залНужен ли нам сейчас кеш-слой перед СУБД
2025-02-18 в 8:52, admin, рубрики: memcached, MyDB, mysql, postgres, redis, rps, Valkey, базы данных, кэширование, СУБДУже лет 20 существует миф (или не миф), что современный Highload-проект невозможен без кэшей. Они всегда нас выручали, когда не справлялись базы данных. Но с тех пор, как появились первые кэши, key-value баз данных и другие технологии, многое изменилось и традиционные СУБД значительно эволюционировали. И так ли теперь нужен кэш?
Мы протестировали самые известные кэш-сервисы и СУБД и попробовали выжать из них миллион запросов в секунду в разных условиях. Делимся с вами результатами в этой статье.
Прежде чем выбирать язык программирования, необходимо изучить SQL
2025-02-12 в 16:16, admin, рубрики: sql, базы данных, для начинающих, СУБД, языки программирования
В этой статье отвечу на три вопроса:
-
Какие существуют виды языков программирования;
-
Почему нужно сначала изучить SQL;
-
Как учить SQL бесплатно.
База данных сниппетов со смысловым поиском: что «под капотом»
2025-02-11 в 6:45, admin, рубрики: administration, bash, cheatsheets, opensearch, support, базы данных, семантический поиск, сниппеты, языковые моделиХочу поддержать жанр статей «что под капотом» и рассказать подробности реализации проекта code-magic.com — базы данных сниппетов со смысловым поиском.
Как появилась идея проекта
Секреты стройности монолита: подходы по снятию нагрузки с БД
2025-02-03 в 7:00, admin, рубрики: doctrine, haproxy, highload, mysql, php, postgresql, базы данных, монолит, монолитная архитектура, оптимизация
Привет! Меня зовут Олег Кретинин, и я разработчик в команде общих компонентов в Яндекс Еде. Сегодня я расскажу о том, как мы смогли успешно снять нагрузку с нашей базы данных, а также уменьшить её размер.
Озеро для дата-склада: как мы нырнули в новые методы хранения данных и что из этого вышло
2025-01-27 в 6:15, admin, рубрики: data, data engineering, data lake, data warehouse, dwh, архитектура данных, базы данных, данные, корпоративное хранилище данных, хранилище данныхПривет! Меня зовут Михаил Килинский, я — Senior Developer в проекте Data Warehouse «Лаборатории Касперского». Наша команда строит хранилища данных и разрабатывает ETL- и ELT-процессы, мы пишем на Python, SQL и C# (.NET), а весь код находится в монорепозитории.
Безумные и забавные факты о SQLite
2025-01-15 в 13:01, admin, рубрики: ruvds_перевод, sqlite, базы данных, открытый исходный код, СУБД
- SQLite — самая часто разворачиваемая и используемая база данных. На текущий момент активно используется более одного триллиона (1000000000000 или миллиона миллионов) баз данных SQLite.
Её поддерживают три человека. Они не допускают внешних контрибьюторов.
- Скорее всего, SQLite используется больше, чем все остальные движки баз данных суммарно. В мире работают миллиарды копий SQLite. Её можно встретить повсюду.
- К тому же, есть такая вероятность, что это один из пяти наиболее часто разворачиваемых программных модулей.
- За разработкой SQLite стоит компания Hwaci. Кажется, она занимается и музыкой (?).
- Изначально SQLite создавалась для корабля ВМС США. Ричард Хипп (D. Richard Hipp, DRH) разрабатывал ПО для эсминца USS Oscar Austin. Раньше ПО корабля просто переставало работать при выходе из строя сервера (это было в 2000-х). Для боевого корабля это неприемлемо.
Поэтому DRH задался вопросом: что, если база данных будет работать без какого-либо сервера?Читать полностью »
Как я сделал PR на 14К строк в проект YDB будучи студентом
2025-01-15 в 9:33, admin, рубрики: antlr4, ydb, базы данных, парсинг, яндекс
В этой статье я хотел бы рассказать о задаче, решение которой легло в основу моей дипломной работы. В ноябре 2023 года я был студентом Физтеха — учился на базовой кафедре Яндекса, программа обучения которой реализуется совместно с ШАД. Задача заключалась в переводе парсера языка запросов YQL (диалект SQL для Читать полностью »
SQL-инъекции для начинающих
2025-01-14 в 23:20, admin, рубрики: архитектура бд, атаки, базы данных, инъекции, начинающим, хакерыНедавно я участвовала в разработке курса для администраторов баз данных. Одной из ключевых тем, которые хотелось осветить, помимо прочих, были инъекции — атаки, направленные на веб-приложения и базы данных. Однако, обсуждая программу с коллегами, я столкнулась с мнением, что эта тема может оказаться сложной для понимания начинающими специалистами, и даже некоторые миддлы могут испытывать затруднения с пониманием на уровне концепции.
Эксперимент по ускорению SQLite
2025-01-10 в 13:01, admin, рубрики: ruvds_перевод, sqlite, базы данных, бессерверные вычисления, исследования в it, обработка данных, оптимизация, периферийный вычисления
SQLite быстра, но можно ли сделать её ещё быстрее? Исследователи из Университетов Хельсинки и Кембриджа задались этим вопросом и опубликовали работу Serverless Runtime / Database Co-Design With Asynchronous I/O. В ней они продемонстрировали возможность 100-кратного снижения времени задержки, и ниже я в общих чертах эту их работу прокомментирую.
Речь пойдёт об исследовании возможностей Limbo — переписанной на Rust версии SQLite.Читать полностью »