databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

Продвинутый курс SQL

В этом видео автор рассматривает на практике работу с продвинутыми командами языка запросов SQL.

01:14 Сортировка по номеру
03:23 Ограничение вывода (LIMIT)
06:30 Уникальность данных (DISTINCT)
08:18 Сложение колонок
11:00 Псевдонимы
15:35 JOIN - связи таблиц
27:45 LEFT JOIN
29:38 RIGHT JOIN
35:00 Быть или не быть (EXISTS)
39:32 Объединения (UNION)
41:42 Глобальный поиск
43:45 Агрегатные функции
54:00 Группировка данных (GROUP BY)

Смотреть это видео на youtube: youtu.be/iawjAmwTo9E

Читать полностью…

Базы данных | Access, SQL, Big Data

Миграция терабайтной базы 1С: УПП с платформы 1C 8.1 на 8.3

В этом материале автор говорит про, казалось бы, обыденный случай – обновление платформы 1С. Но большие базы, как обычно, накладывают свои ограничения на все процессы обновления / обслуживания / конвертации. Есть много рисков, которые необходимо предусмотреть на берегу, подстелить соломки, чтобы не получить простои системы и бизнеса.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

5 бесплатных сервисов для практики SQL

Когда вы только начинаете изучать SQL, нужно как можно больше практики. Хорошо, когда есть реальные задачи на работе, на которых можно практиковаться. Но если их нет - то эти бесплатные сервисы помогут получить необходимую практику и улучшить свой уровень.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Знакомство с Percona Everest [Beta] — инструментом для управления кластерами баз данных

Осенью 2023 года вышла Alpha-версия Percona Everest — нового продукта от компании Percona. Это cloud-native database platform — инструмент с графическим интерфейсом для управления кластерами баз данных, развёрнутыми в Kubernetes.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Группировка и фильтрация в SQL

В этом видеоуроке автор подробно разбирает процесс фильтрации результатов группировки в SQL с помощью ключевого слова HAVING.

00:00 Фильтрация результатов группировки
00:59 Почему не работает фильтрация в WHERE
01:41 Порядок выполнения запроса SQL
02:29 Ключевое слово HAVING
04:00 Итоги

Смотреть это видео на youtube: youtu.be/ytfXUvCsNuo

Читать полностью…

Базы данных | Access, SQL, Big Data

Интеграция LLM в корпоративное хранилище данных

В этой статье автор рассматривает способы интеграции Large Language Models (LLM) в корпоративные системы хранения данных. Основное внимание уделено использованию LLM для автоматического извлечения информации из текстовых данных с последующим формированием SQL-запросов.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Основные команды SQL, которые должен знать каждый программист

В этой статье автор рассмотрит основные команды SQL, включая агрегатные функции и вложенные подзапросы, на примере работы с MySQL.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Проектирование и нормализация базы данных

В этом видеоуроке по SQL автор разбирает:

00:00 Введение в процесс проектирования базы данных
18:13 Рекомендации, лучшие и худшие практики по проектированию БД
26:59 Нормальные формы и нормализация БД

Смотреть это видео на youtube: youtu.be/AdWi1L5Q13o

Читать полностью…

Базы данных | Access, SQL, Big Data

Оператор SQL IN на понятных примерах

В этой статье автор подробно разбирает синтаксис оператора фильтрации SQL IN и рассматривает его использование на практических примерах.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как благодаря переезду хранилища данных прокачать стек, архитектуру и скиллы команды

Правильный стек, правильная архитектура и правильное видение процесса ELT — залог успешной аналитики, с этим никто не спорит. Но как прийти к ним и как найти баланс между затратами времени на исследование и поддержкой уже сделанного в бесконечном потоке A/B-тестирований, дашбордов, метрик и Ad hoc-запросов?

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как маскировка данных спасает вашу приватность

Одним из распространенных методов защиты данных является их маскировка. Для более ясного понимания этого процесса в данной статье автор рассмотрит различные техники маскировки и попробует разобраться, с чем это едят.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Простая документация с dbt: упрощение документирования хранилищ данных

К счастью, dbt (Data Build Tool) значительно упростил задачу документирования хранилищ данных. Все, что нужно сделать, это включить описание таблиц и колонок в YAML-файл схемы, затем вся информация собирается в аккуратный HTML-файл.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL миграции в Postgres. Часть 1

Как обновить значение атрибута для всех записей таблицы? Как добавить первичный или уникальный ключ в таблицу? Как разбить таблицу на две?.. На эти и другие вопросы, возникающие при проведении миграций схемы и данных в PostgreSQL, автор статьи дает ответы в виде практических советов.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Финансовая арифметика в PostgreSQL

Иногда перед разработчиком, аналитиком или даже бизнес-пользователем встает задача выполнить какие-то финансовые расчеты, соблюдая два строгих требования. Во-первых, даже для миллиардных сумм необходимо обеспечить точность до копейки, во-вторых, перекрестные итоги тоже должны сходиться до копейки.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Вся база SQL для начинающих

В этом ролике автор расскажет вам всё, что нужно знать про основы SQL.

0:00:00 Вступление
0:01:45 БД и SQL
0:07:58 Таблицы
0:11:52 Создание таблиц
0:21:48 INSERT/UPDATE/DELETE
0:34:26 SELECT
0:39:50 FOREIGN KEY
0:46:22 JOIN
1:01:00 Агрегатные функции, GROUP BY
1:09:20 HAVING
1:13:09 Изменение таблиц

Смотреть это видео на youtube: youtu.be/5sG9kmXYsKU

Читать полностью…

Базы данных | Access, SQL, Big Data

Топ полезных SQL-запросов для PostgreSQL

Статей о работе с PostgreSQL и её преимуществах достаточно много, но не всегда из них понятно, как следить за состоянием базы и метриками, влияющими на её оптимальную работу. В этой статье подробно рассмотрим SQL-запросы, которые помогут вам отслеживать эти показатели и просто могут быть полезны как пользователю.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Что такое CLICKHOUSE и колоночные СУБД

В этом ролике автор дает подробные ответы на следующие вопросы:
• Что такое Clickhouse
• Что такое колоночные СУБД
• Чем отличаются от обычных строковых
• Почему Clickhouse работает так быстро
• Преимущества использования
• Трудности при работе
• Для каких проектов используется
• В каких сферах используется
• Где не нужен
• Советы по работе с Clickhouse

Смотреть это видео на youtube: youtu.be/2b4heaO3U8k

Читать полностью…

Базы данных | Access, SQL, Big Data

Как стать SQL-разработчиком или Data-инженером

В этом вебинаре вы рассмотрите, чем занимается специалист, работающий с базами данных, в том числе с их анализом. Кому эта область может быть интересна и какая востребованность специалистов на рынке.

План вебинара:
1. Основные направления развития в IT
2. Кто такие SQL-разработчик и дата-инженер
3. Что такое база данных и язык SQL?
4. Применение языка SQL и баз данных
5. Сферы применения баз данных
6. Какие СУБД бывают?
7. Чем занимается SQL-разработчик?
8. Для кого может быть интересно направление дата-инженера
9. Востребованность на рынке
10. Должности и направления для развития

Смотреть это видео на youtube: youtu.be/kcvslLoWDEQ

Читать полностью…

Базы данных | Access, SQL, Big Data

Разработка многопоточной базы данных

В этой статье автор расскажет о том, как разработать многопоточную базу данных, уделяя внимание ключевым компонентам и механизмам, которые обеспечивают ее эффективное функционирование. Вы рассмотрите основы хранилища данных, транзакционные системы, многопоточность, журналирование и восстановление, а также создание API для взаимодействия с базой данных.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как SQL-скриптом сократить время ручного тестирования в 3 раза и облегчить жизнь коллегам

Если ваша система использует БД и время от времени нужны тестовые записи, или если вы делаете insert-ы с несколькими наборами значений values, то изложенное в этой статье может вам пригодиться.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

LLM'ы в преобразовании запроса на естественном языке в SQL (text2sql)

Одной из главных проблем, с которыми сталкиваются компании, это непосредственная работа с базами данных с помощью языка SQL. Поэтому на рынке появляются инструменты, позволяющие писать запрос на естественном языке и получать ответ на языке запросов. В этой статье автор познакомит вас с двумя AI-инструментами для генерации SQL-запросов: SQLCoder Defog и SQLthroughAI.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Книга: «Антипаттерны SQL. Как избежать ловушек при работе с базами данных»

Язык SQL необходим для работы со структурированными данными. Программисты, прекрасно знающие свой любимый язык (Java, Python или Go), не могут разбираться во всем, и часто не являются экспертами в SQL. Это приводит к появлению антипаттернов — решений, которые на первый взгляд кажутся правильными, но со временем создают все больше проблем.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Переименование и удаление таблиц в базе данных

В этом видеоуроке автор подробно разбирает процесс переименования и удаления таблиц в базе данных (ALTER TABLE, DROP TABLE).

00:00 Вступление
00:42 Переименование таблиц
01:54 Удаление таблиц

Смотреть это видео на youtube: youtu.be/VKhLWx7ue6A

Читать полностью…

Базы данных | Access, SQL, Big Data

Что такое SQL индексы

В этом ролике автор дает подробные ответы на следующие вопросы:
• Что такое индексация в SQL
• Для чего нужна индексация
• Как работает индексация
• Что такое двоичный поиск
• Что такое план выполнения запроса
• Когда лучше использовать индексы
• Когда лучше не использовать индексы
• Что такое кластеризованный индекс
• Что такое некластеризованный индекс

Смотреть это видео на youtube: youtu.be/LpEwssOYRKA

Читать полностью…

Базы данных | Access, SQL, Big Data

Лень разбираться в PowerPoint?

Для вас уже всё сделали.
📌 Канал Секреты презентаций расскажет обо всех приёмах, возможностях и лайфхаках по работе в powerpoint.

Подписывайтесь и прокачивайте свои навыки: @powerpoint

Читать полностью…

Базы данных | Access, SQL, Big Data

Администратор баз данных: кто такой DBA?

Основа почти любого проекта - это данные. Их надо хранить, обрабатывать и получать к ним быстрый доступ. Для этого приложения обычно используют различные СУБД.

Даже временная недоступность данных может дорого обойтись компании, а их потеря и вовсе обернуться крахом. Поэтому в крупных компаниях или проектах выделяется отдельная должность администратора баз данных (DBA).

В этой лекции автор разбирает, что даёт СУБД, с чем может столкнуться DBA в своей работе и какими знаниями он должен обладать.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Простыми словами о Big Data

В этом видео автор объясняет, что такое Big Data на понятном языке. Вы рассмотрите методы и инструменты работы с большими данными, разберете разницу между Big Data и Data Science, а также между data scientist, data analyst и data engineer. Узнаете, почему биг дата - это новая нефть, и почему нужно бояться умных чайников.

Смотреть это видео на youtube: youtu.be/rOJ42y511lI

Читать полностью…

Базы данных | Access, SQL, Big Data

Оконные функции SQL

В этом ролике автор дает подробные ответы на следующие вопросы:
• Что такое оконные функции SQL
• Зачем нужны оконные функции
• Примеры использования
• Синтаксис
• Разница оконных функций и GROUP BY
• Классы
• Функции

Смотреть это видео на youtube: youtu.be/phIR9W0yIaE

Читать полностью…

Базы данных | Access, SQL, Big Data

Как уменьшить расходы на КХД в 7 раз и не отстать от AI гонки?
Нужно использовать КХД на архитектуре Lakehouse. 74% западных корпораций уже мигрировали на архитектуру Lakehouse, которая объединяет сильные стороны DWH и Data Lake, а также служит фундаментом для быстрого внедрения AI-инициатив.

Протестируйте VK Data Lakehouse — КХД нового поколения для уменьшения стоимости хранения данных и ускорения аналитики до 10 раз.

→ Дешевое хранение данных в S3-хранилище. Стоимость хранения 1 ГБ с репликацией в облаке уменьшается в 10 раз — с 30 до 3 рублей по сравнению с DWH.

→ Транзакционность для данных в S3-хранилище. Табличный формат поверх S3 обеспечивает ACID и полноценную работу в сценариях DWH.

→ Ускорение аналитики. MPP SQL-движок для параллельной работы с данными из разных источников без тяжелого ETL.

→ Уменьшение расходов за счет разделения compute и storage. Платите только за то, что используете. Нет затрат на простаивающие ресурсы.

→ Линейный рост затрат вместо экспоненциального при масштабировании.

→ Не нужно содержать отдельные команды под DWH и Data Lake.


→ Универсальное решение для работы с любым объемом данных. От гигабайт до сотен петабайт. Без сложного масштабирования и миграций.

→ Работа с ML становится быстрее без рисков уронить DWH. DS команда может экспериментировать с ad hoc запросами без опаски уронить DWH и BI.

Чтобы получить до 150 000 бонусных рублей для тестирования VK Data Lakehouse в VK Cloud с поддержкой архитекторов:

👉 Оставляйте заявку

Будем рядом на всех этапах пилота и поможем довести MVP до результата.

Читать полностью…

Базы данных | Access, SQL, Big Data

Подсказки в SQL

В этом видеоуроке автор подробно и наглядно разбирает процесс работы с подсказками (HINT) в SQL.

Смотреть это видео на youtube: youtu.be/Gyf7v0cX1iQ

Читать полностью…
Subscribe to a channel