databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

👍Быстрый старт в математику ML: 2 бесплатных урока

Присоединяйтесь на любой или несколько открытых уроков курса «Рекомендательные системы» для DS/ML-специалистов.
Получите ключевые знания для работы с данными:

🟣 15.10.2025 в 20:00 «Двухэтапные модели: как объединить матричную факторизацию и бустинг для победы в соревнованиях и в реальном бизнесе»
Разбор двухэтапных моделей для рекомендаций.

🟣 20.10.2025 в 20:00 «Sequential Recommendations: учимся на последовательностях действий пользователей»
Разберем, как крупнейшие стриминги и видеохостинги угадывают следующий клик.

➡️ Регистрация : https://clck.ru/3PiT7r

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Читать полностью…

Базы данных | Access, SQL, Big Data

Работаю 5/2 за 60.000 рублей в месяц

Так я жил несколько месяцев назад, чередуя тревожность с выгоранием, пока не узнал, что можно зарабатывать на создании чат-ботов.

Нет рисков и ублюдка начальника, который заваливает тупыми задачами и постоянно орет. Работаешь на себя и зарабатываешь от 100.000 рублей в месяц.

Все, что нужно — создавать чат-ботов в специальном конструкторе. И это не про сложные коды программирования, тяжелое обучение и работу 24/7. За парочку часов создаешь бота по заданию, за которое в среднем платят 9.000 — 10.000 рублей

Идеальный вариант наконец-то уйти из найма НАВСЕГДА. Забирай инструкцию здесь — @other_digital, там узнаешь, как уже в первый месяц найти клиентов и заработать первые 100.000 рублей.

Читать полностью…

Базы данных | Access, SQL, Big Data

Как построить отказоустойчивую архитектуру баз данных и избежать простоев бизнес-критичных сервисов?

Разберемся на вебинаре 15 октября.

В программе

🔹 Отказоустойчивость баз данных как основа непрерывности бизнес-процессов.
🔹 Архитектура отказоустойчивости: ключевые принципы и подводные камни.
🔹 Сравнение подходов: самостоятельное развертывание и управляемый сервис.
🔹 Livedemo. Испытаем отказоустойчивость на прочность.

Мы в реальном времени увидим, как кластер переживает сбой зоны доступности и переполнение диска. Разберем, как автоматизировать реакцию на инциденты: сбой зоны доступности, переполнение диска и восстановление из резервной копии.

Регистрируйтесь на вебинар «Базы данных без рисков и простоев: тестируем кластер СУБД в прямом эфире», чтобы принять участие в эксперименте вместе с нами.

Зарегистрироваться

Читать полностью…

Базы данных | Access, SQL, Big Data

Лень разбираться в Word?

Для вас уже всё сделали.
📌 Канал Word Hacks рассказывает обо всех возможностях, приёмах и лайфхаках по работе в word.

Подписывайтесь и прокачивайте свои навыки: @word_ms

Читать полностью…

Базы данных | Access, SQL, Big Data

Думаете, финансы – это скучно и сложно? Мы докажем обратное!

Финансовый инстинкт – это ваш личный гид в мире денег. Мы поможем понять:

🟢Понять, куда идут ваши деньги.
🟢Найти новые источники дохода.
🟢Разобраться в инвестирование и сбережениях.

У нас вы найдете полезные статьи, разборы актуальных тем, ответы на ваши вопросы и вдохновение для достижения финансовых целей.

Мы верим, что каждый может стать хозяином своих денег, если будет действовать осознанно
/channel/+CXAOHu4o2qYyZmIy

Читать полностью…

Базы данных | Access, SQL, Big Data

PostgreSQL 17: архитектура и тюнинг SQL-запросов

Погрузись в архитектуру и прокачай оптимизацию запросов одной из самых популярных open source СУБД – PostgreSQL.

🌐 В программе курса:

🤩 Разберем, как работают СУБД вообще и PostgreSQL в частности: что такое MVCC, ACID, WAL, LRU, PPC/TPC и другие фундаментальные понятия архитектуры баз данных
🤩 Получите свой собственный выделенный облачный PostgreSQL-сервер (8 vCPU, 12G RAM, 100G NVMe) – БЕСПЛАТНО на время обучения предоставляется
🤩 Получите теорию и практику EXPLAIN и EXPLAIN ANALYZE на разных типа запросов
🤩 Изучите архитектуру хранения данных в PostgreSQL, типы и особенности индексов, а также получите полезные советы и трюки оптимизации БД

Кто мы: R&D-центр Devhands, основатель школы Алексей Рыбак. Автор курса — Николай Ихалайнен, эксперт по СУБД (ex-Percona), со-основатель MyDB, энтузиаст открытого ПО.

🗓 Старт курса: 16 октября, 5 недель обучения.

Изучить программу и записаться можно здесь.

Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquiQ76e

Читать полностью…

Базы данных | Access, SQL, Big Data

Администрирование SQL Server

В этом видео автор подробно разбирает процесс администрирования баз данных для начинающих.

0:00:13 sqlcmd
0:29:31 sys.databases
0:35:24 База master
0:36:15 База msdb
0:37:27 База tempdb
0:42:19 База model
2:07:41 Файловые группы
2:43:14 Резервное копирование
3:08:46 Full backUp
3:16:55 Restore Database
3:18:34 Restore HeaderOnly
3:31:06 Differential backup

Смотреть это видео на youtube: youtu.be/X508KcPidyk

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL HowTo: итоги по строкам и столбцам «в одно действие»

В этой статье автор предлагает немного отвлечься от простых SELECT и посмотреть на реальной бизнес-задаче построения различных "тепловых карт" и "шахматок" как знание возможностей SQL может облегчить жизнь и разработчику, и его базе.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Нагрузочное тестирование СУБД в облачной среде (часть 2)

Следующая серия экспериментов выполняется с использованием периода сглаживания = 1 час. Для тестирования используется стандартный инструментарий - утилита pgbench.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы SQL для аналитики данных

В этом ролике автор собрал все SQL-команды, которые должен знать и уметь использовать в своей работе аналитик данных или продуктовый аналитик.

00:22 SELECT
01:01 WHERE (IN)
02:46 WHERE LIKE
03:57 Как исключить NULL значения?
06:33 Агрегирующие функции
06:53 GROUP BY
08:57 HAVING
10:06 SQL JOIN
12:48 ORDER BY
13:41 Оконные функции
16:49 Вложенные запросы

Смотреть это видео на youtube: youtu.be/Zf8M3xJaMEc

Читать полностью…

Базы данных | Access, SQL, Big Data

Статистический анализ результатов нагрузочного тестирования СУБД в условиях облачной инфраструктуры

Проведение нагрузочного тестирования и получение достоверных оценочных результатов производительности СУБД в условиях нестабильной инфраструктуры - возможно. Хотя и требует большего времени и затрат на сбор и анализ экспериментальных данных.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Представления в SQL

В этом видеоуроке автор подробно разбирает процесс работы с представлениями (оператор VIEW) в SQL.

00:00 Представления в SQL
01:20 Работа представлений
02:21 VIEW из нескольких таблиц
03:32 Зачем использовать VIEW?
05:05 Материализованные представления
06:35 Удаление представлений
06:48 Итоги

Смотреть это видео на youtube: youtu.be/B3RRgBx_foc

Читать полностью…

Базы данных | Access, SQL, Big Data

Лень разбираться в PowerPoint?

Для вас уже всё сделали.
📌 Канал Секреты презентаций расскажет обо всех приёмах, возможностях и лайфхаках по работе в powerpoint.

Подписывайтесь и прокачивайте свои навыки: @powerpoint

Читать полностью…

Базы данных | Access, SQL, Big Data

PostgreSQL 18 уже в Yandex Cloud

25 сентября вышла новая версия PostgreSQL 18, и в тот же день она стала доступна в Yandex Cloud. Это значит, что разработчики и администраторы БД могут использовать возможности PostgreSQL 18 в продакшне без задержек — сервис обновляется «day-one».

🔹 Async I/O — до трёх раз быстрее выполняются операции чтения. Это особенно заметно при сложных аналитических запросах и работе с большими наборами данных.

🔹 Skip scan для b-tree индексов — теперь индекс может ускорить выборки даже тогда, когда запрос использует не все колонки из индекса. Это снижает количество full scan и экономит ресурсы.

🔹 UUIDv7 — новые идентификаторы включают временную метку. Это позволяет сохранять уникальность и одновременно упрощает сортировку по времени создания.

В Yandex Cloud доступны все актуальные версии PostgreSQL, а обновления появляются сразу после релиза в сообществе.

👉 Подробнее

Читать полностью…

Базы данных | Access, SQL, Big Data

Современные базы данных: от векторных СУБД до моделей работы с данными в PostgreSQL.

Базы данных меняются так же быстро, как и задачи, которые они решают. Сегодня нужны не только надёжные стратегии хранения, но и новые инструменты для работы с AI.

OTUS приглашает на два открытых вебинара курса «Базы данных», где мы разберём ключевые технологии и практики:

📌 29 сентября, 20:00
«Векторные СУБД: Milvus, Weaviate, Qdrant и Chroma в реальной практике»
— сравним сильные и слабые стороны решений и разберём, как встроить их в проекты с LLM и AI-сервисами.

📌 13 октября, 20:00
«Модель работы с данными в PostgreSQL»
— разберём ключевые аспекты модели данных в PostgreSQL, включая структуру таблиц, индексов, транзакций и связи между данными.

Оба вебинара бесплатные и будут полезны разработчикам, инженерам данных, администраторам и архитекторам, которые работают с современными системами хранения и защиты данных.

👉 Регистрируйтесь: https://vk.cc/cPRnX9

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Читать полностью…

Базы данных | Access, SQL, Big Data

Почему Trino такой быстрый: архитектура оптимизатора SQL-запросов

Аналитические системы должны эффективно обрабатывать сложные пользовательские запросы к десяткам и сотням терабайт данных. Продвинутый оптимизатор запросов является важнейшим компонентом любого big data движка. В этой статье автор разбирает, как устроен оптимизатор запросов в массивно-параллельном аналитическом SQL-движке Trino.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Немного про OR в SQL запросах

Несмотря на избитость темы и многочисленные рекомендации избегать OR в выражениях WHERE/ON SQL запросов, жизнь вносит свои коррективы. Иногда сама постановка задачи подразумевает необходимость использовать OR. В этой статье автор разберет случай, когда OR должно привести к двум разным выборкам по разным индексам одной и той же таблицы.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Правильная работа с базой данных на Python

Эта статья рассчитана в основном на новичков, в ней автор подробно рассматривает, как не упереться в лимиты подключений к базе, чтобы приложение в продакшн при этом не упало.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Нормальные формы баз данных

В этом ролике автор рассматривает процесс нормализации баз данных и разбирает для чего он нужен. Вы узнаете что такое нормальная форма и какие формы существуют.

00:00 Введение
01:20 Что такое нормализация
02:08 Что такое избыточность данных с примерами
04:51 Какие бывают нормальные формы БД
08:00 Ненормализованная форма
09:37 Первая нормальная форма
11:24 Вторая нормальная форма
15:29 Что такое декомпозиция
16:18 Третья нормальная форма
18:54 Нормальная форма Бойса-Кодда
21:54 Четвертая нормальная форма
27:45 Почему обычно не нормализуют до 5 или 6 формы
29:14 Пятая нормальная форма
35:39 Шестая нормальная форма
38:02 Выводы и заключение

Смотреть это видео на youtube: youtu.be/zqQxWdTpSIA

Читать полностью…

Базы данных | Access, SQL, Big Data

«PostgreSQL для начинающих»: #2 — Простые SELECT

В этой статье автор разберет самые простые, но важные возможности команды SELECT, наиболее часто используемой при работе с базами данных - формирование выборок (VALUES), их ограничение (LIMIT/OFFSET/FETCH), фильтрацию (WHERE/HAVING), сортировку (ORDER BY), уникализацию (DISTINCT) и группировку (GROUP BY).

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Производственный календарь в PostgreSQL

Заводить руками свежий производственный календарь не хочется. Хочется, чтобы он появился вызовом одной функции. Цель этой статьи - показать возможности COPY ... FROM PROGRAM и простейшие приемы парсинга XML в PostgreSQL.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Бизнес — не игра в удачу. Это среда, в которой побеждают подготовленные.

«Бизнес Атмосфера» — канал для тех, кто мыслит стратегически, ищет нестандартные решения и понимает ценность идей до того, как о них заговорят все.

🎚️ Уникальные бизнес-идеи, о которых молчат на YouTube
🎚️ Финансовые инсайты, которые работают в реальности
🎚️ Креативные подходы к заработку, которые разрывают шаблоны
🎚️ Как зарабатывать не “когда-нибудь”, а сейчас и здесь

Мы не продаём мечты. Мы собираем людей, которые строят
бизнес атмосферу.

Читать полностью…

Базы данных | Access, SQL, Big Data

Бизнесу данные нужны как воздух 📊

На их основе компании принимают важные стратегические решения. Поэтому спрос на аналитиков растёт в самых разных сферах: от банковской до медицинской.

На курсе «Аналитика данных с МФТИ» готовят специалистов универсальной квалификации. За 10 месяцев вы научитесь использовать Python для анализа данных, применять методы ИИ в своих задачах и работать с базами данных.

С универсальными знаниями вы сможете строить карьеру в одном из трёх направлений аналитики:

➡️ Аналитика данных.
➡️ Data Science.
➡️ Инженерия данных.

🎓 После обучения получите дипломы о профессиональной переподготовке от МФТИ и Нетологии. Центр развития карьеры поможет с трудоустройством, резюме и портфолио.

Записывайтесь на курс и становитесь универсальным специалистом в аналитике → https://tglink.io/f8d09a19b36d?erid=2W5zFHVpC2c ❤️

Читать полностью…

Базы данных | Access, SQL, Big Data

Нагрузочное тестирование СУБД в облачной среде (часть 1)

Исследование гипотезы "СУБД по природе своей является стохастической, а не детерминированной системой". С целью проверки этого утверждения и в связи с началом работ по подготовке методики статистического анализа СУБД в условиях облачной среды, была начата серия экспериментов для определения влияния внешних/случайных факторов инфраструктуры на производительность СУБД.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Сравнительный анализ методов аппроксимации на основе SQL-запросов

В этой статье автор показывает, что для решения задач аппроксимации совсем не обязательно использовать сторонние инструменты. Если ваши экспериментальные данные хранятся в базе, и есть возможность выполнять к данным SQL запросы, значит у вас есть все необходимое, чтобы решить задачу аппроксимации.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Redis и Valkey – изучите секреты самых популярных open source key-value СУБД

В высоко-нагруженных сервисах Redis — не просто кэш, а важная подсистема, на которой строится значимая часть бизнес-логики. От его стабильности, масштабируемости и отказоустойчивости зависит производительность всего сервиса. Valkey - это современный производительный форк Redis с открытым исходным кодом, поддерживаемый сообществом и рядом крупных компаний. Valkey набирает популярность, поддержан крупными облачными провайдерами, и вполне возможно потеснит или вовсе заменит Redis со временем.

Наш курс — для тех, кто хочет держать свой стэк и знания актуальными и глубоко разбираться, как устроен Redis и Valkey.

🌐 В программе курса:

🤩 Как эффективно использовать базовые и продвинутые структуры данных: HyperLogLog, Bitmaps и Bisields, Streams, Geospatial-индексы, Bloom Filters
🤩 Как проектировать in-memory системы, которые не разваливаются под нагрузкой, что влияет на отказоустойчивость и как её добиться
🤩 Как работает репликация и кластеризация на практике (режимы Sentinel и Cluster)
🤩 Как встроить Redis/Valkey в реальный прод с учётом безопасности, интеграций и современных практик мониторинга.

Кто мы: R&D-центр Devhands, основатель школы Алексей Рыбак. Автор курса — Константин Ратвин, преподаватель МФТИ на кафедре БИТ (совместно со СберТех), эксперт по распределённым системам и банковским ИТ, автор курсов по СУБД и инфраструктуре, спикер HighLoad++ и PGConf.

🗓 Старт курса: 7 октября, 6 недель обучения.
Изучить программу и записаться можно здесь.

Ждем вас!

Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzqxNnFKA

Читать полностью…

Базы данных | Access, SQL, Big Data

Как создавать высокопроизводительные очереди сообщений с различной архитектурой

В этом материале автор рассказывает об основных сложностях развития высоконагруженных ИТ-систем и о способах их преодоления с помощью очередей сообщений на примере Tarantool Queue Enterprise.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Наводим порядок с базами данных. Переносим файлы в S3, мигрируем в единый кластер

В этой статье автор расскажет историю миграции баз данных в кластер и переноса тяжелых файлов в S3; в том числе о том, что пошло не по плану и об обратной стороне размещения баз в едином кластере.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Анализ данных на языке SQL: Хранилища и витрины данных

В этом видеоуроке автор подробно и наглядно разбирает процесс работы с хранилищами и витринами данных в SQL.

00:00 Вступление
13:48 OLTP
19:15 DWH

Смотреть это видео на youtube: youtu.be/wtm82_IY1sY

Читать полностью…

Базы данных | Access, SQL, Big Data

«PostgreSQL для начинающих»: #1 — Основы SQL

В статье: рассказ об основах SQL, возможностях простых и сложных SELECT, анализ производительности запросов, разбор [не]эффективного применения индексов и особенностей работы транзакций и блокировок в этой СУБД.

Базы данных

Читать полностью…
Subscribe to a channel