databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

Инфраструктура для data engineer Kafka

В этом материале автор покажет, как можно использовать Kafka в дата-инженерии и как её "пощупать".

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как мы перенесли архив данных из Teradata в GreenPlum с помощью Hadoop и PXF

В этой статье автор расскажет о полученном опыте и результатах переноса архива данных объёмом более 400 Тб из Teradata в GreenPlum, а также о трудностях и решениях, связанных с этим процессом.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL HowTo: TOP-N на субинтервалах

Автор периодически сталкивался с однотипными задачами вида "показать TOP-N позиций на каждом из вложенных интервалов некоторого периода", поэтому в этой статье он решил описать создание эффективного, но компактного запроса для PostgreSQL, который решает такую задачу.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Организуем High Availability PostgreSQL

Чтобы система долго работала без сбоев и перерывов, нужно поработать над отказоустойчивостью. В этой статье автор даст несколько способов её построить и покажет готовое решение.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как мы продукт на PostgreSQL переводили

В этой статье автор поделится своими наработками как научить приложение работать с СУБД PostgreSQL и провести первую миграцию боевой системы.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Деревья ltree в PostgreSQL – простым языком

В этой статье автор подробно разберет иерархические деревья ltree в PostgreSQL и расскажет о базовых приёмах извлечения данных из таких деревьев.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как был создан потоковый SQL-движок

Потоковый SQL-движок обеспечивает, чтобы результаты SQL-запросов всегда оставались актуальны, и их не приходилось пересчитывать. Даже в тех случаях, когда меняются данные, на которых основан запрос.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Первый шаг в аналитику или SQL для начинающих

SQL — один из базовых инструментов работы аналитика. Он используется в любой сфере, где есть данные, и позволяет управлять ими напрямую, минуя ограничения привычных табличных редакторов.

На вебинаре разберем:
🟣что такое SQL и чем он отличается от Excel;
🟣как устроены базы данных и зачем они нужны;
🟣основы синтаксиса SQL;
🟣простые примеры запросов на практике;
🟣с чего начинается работа аналитика и почему SQL становится первым шагом.

🎙Спикер: Юлия Брусенцова, руководитель отдела аналитики в компании «Смотрёшка» (ООО «Лайфстрим»).
📁Дата и время: 4 сентября в 19:00.

Регистрация 📍

Реклама. НИУ "ВШЭ". ИНН 7714030726. erid:2SDnjcxM8op

Читать полностью…

Базы данных | Access, SQL, Big Data

REKONFA Live

6 ноября приглашаем рекламодателей, агентства и рекламные площадки обсудить технологии, маркетинговые инструменты и актуальные новинки. Ключевые участники рынка поделятся опытом и расскажут:

— О ситуации на рынке рекламы
— Как продвигать и продавать в интернете в 2025 году
— Как бизнесу адаптироваться к меняющимся условиям

Вас ждут доклады на актуальные темы, классный нетворкинг, вдохновляющая атмосфера для творчества и креатива.

Встречаемся 6 ноября в Москве. Для тех, кто не сможет приехать, организуем интерактивное digital-шоу. Мероприятие бесплатное, нужно только зарегистрироваться.

Зарегистрироваться

#реклама 16+
ya.rekonfa.ru

О рекламодателе

Читать полностью…

Базы данных | Access, SQL, Big Data

Как устроена виртуальная машина SQLite

Среди встраиваемых баз данных SQLite уникальна не только благодаря своему транзакционному уровню хранения данных, построенному по принципу Б-дерева, но и благодаря собственному надёжному движку выполнения SQL. В этой статье автор подробно разбирает, как SQLite синтаксически анализирует, оптимизирует и выполняет ваши SQL-запросы.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Почему Trino такой быстрый: динамические фильтры

Принцип большинства оптимизаций производительности в аналитических SQL-движках — ответить на запрос пользователя, затратив минимум вычислительных ресурсов. Динамические фильтры — это оптимизация, которая создает дополнительный предикат для одной из сторон оператора Join на основе данных другой стороны. Рассмотрим реализацию динамических фильтров на примере Trino.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL миграции в Postgres. Часть 2

Эта статья посвящена двум более сложным миграциям:
- обновление большой таблицы
- разделение таблицы на две

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Почему вам стоит отказаться от использования timestamp в PostgreSQL

Не секрет, что работа с часовыми поясами — боль, и многие разработчики объяснимо стараются ее избегать. Тем более что в каждом языке программирования и в каждой СУБД работа с часовыми поясами реализована по-разному.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Комбинаторы в ClickHouse

Автору статьи часто приходилось сталкиваться с тем, что не все коллеги были знакомы с комбинаторами агрегатных функций в ClickHouse или же ограничивались использованием комбинатора -If.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Go Tarantool: как построить Key-value-хранилище на сотни тысяч запросов в секунду

С увеличением сложности ИТ-систем все больше становится очевидной ограниченность привычных реализаций с простой архитектурой компонентов. Особенно это заметно в случае систем, которые должны стабильно работать с большими и интенсивными нагрузками.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

👨‍💻Гринатом — ИТ-интегратор Росатома — открывает вакансию системного аналитика!

Ждём кандидатов с опытом работы системным аналитиком в ИТ от 5 лет, навыками проектирования, документирования и интеграций, умением декомпозировать крупные задачи, пониманием принципов построения микросервисной архитектуры ПО и разработки Web-приложений, знанием agile/scrum методологии, BPMN, UML, SQL, OpenProject и Postman. Опыт реализации и внедрения систем ECM, ERP, MES, CRM, HRM будет преимуществом.

🤝С нами вы сможете работать с полным соблюдением ТК РФ в удалённом формате из любого региона с сокращённым днём в пятницу, получать «белую» зарплату 2 раза в месяц, учиться за счёт компании и заботиться о своём здоровье с пакетом ДМС, включающим стоматологию.

Читать полностью…

Базы данных | Access, SQL, Big Data

Работа с множествами в SQL

В этом видеоуроке автор подробно разбирает процесс работы с операторами множеств в SQL (UNION, MINUS, INTERSECT).

00:00 Вступление
00:29 Объединение множеств строк (UNION ALL и UNION)
01:46 Вычитание множеств строк (MINUS)
02:06 Пересечение множеств строк (INTERSECT)

Смотреть это видео на youtube: youtu.be/1n9oQE9i85c

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL vs NoSQL: блеск и нищета реляционных СУБД

В этом видео мы погрузимся в мир реляционных систем управления базами данных. Начнем с истории их развития, затем подробно рассмотрим особенности и преимущества реляционных СУБД. Обсудим современные требования к базам данных и выявим слабые стороны реляционных систем, включая их ограничения в масштабируемости и гибкости.

00:00 Вступление
00:42 История развития СУБД
01:15 Реляционные СУБД
02:27 Новые требования к базам данных
02:55 Что не так с реляционными СУБД
03:05 CAP-теорема / теорема Брюера
05:00 Транзакционность реляционных СУБД
05:47 Как реляционные СУБД хранят данные
07:30 Жёсткие схемы в реляционных базах данных
08:25 ACID и транзакции
11:10 Big Data и другие сценарии
12:22 Итоги

Смотреть это видео на youtube: youtu.be/X7hwc-KmhaY

Читать полностью…

Базы данных | Access, SQL, Big Data

Организация хранения исторических данных в Oracle

В этой статье автор разберет разные способы организации хранения исторических данных в Oracle. Под историческими данными будем понимать историю (лог) изменения данных в таблице.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

🤖 Как научиться думать как аналитик, принимать решения как аналитик, быть аналитиком?

Всё просто: идти на новый набор в Яндекс Лицей на профильный курс по анализу данных.

Он для учащихся школ и колледжей от 13 до 20 лет. Программа построена таким образом, чтобы вы получили крепкий фундамент для старта карьеры в IT.

Научитесь работать с Python и использовать аналитику на практике. Ну и куда без визуализации? К концу курса сможете не только верно анализировать, но и делать красивые отчеты (в компаниях это ценят).

После обучения получите сертификат. Он может помочь получить дополнительные баллы при поступлении в некоторых вузах. Курс бесплатный, но есть отбор. Заявки принимают до 23 сентября.

Переходите по ссылке и регистрируйтесь.

Читать полностью…

Базы данных | Access, SQL, Big Data

Как выбирать технологии для базы данных?

В этом видео автор подробно говорит о современных задачах работы с данными, чем они отличаются и по каким критериям стоит выбирать ту или иную СУБД. Автор разберет примеры использования таких инструментов как GreenPlum, ClickHouse, Cassandra.

В результате вы узнаете маячки, на которые можно обращать внимание при выборе СУБД, и рассмотрите, какие инструменты работы с данными сейчас активно используются.

01:30 Цели и задачи вебинара
04:10 Как нам разговаривать с нашей БД?
05:19 SQL или noSQL?
08:52 Задача №1
18:00 Задача №2
25:40 Задача №3
32:40 Задача №4
39:07 Как выбрать правильный инструмент?
45:25 Последствия выбора неправильного инструмента
47:15 Сравнение с ClickHouse
48:25 Результаты

Смотреть это видео на youtube: youtu.be/hwN1k-jkvmg

Читать полностью…

Базы данных | Access, SQL, Big Data

Проблемы при переходе с MS SQL на PostgreSQL: типы данных

В этой статье автор продолжит серию и поделится проблемами некоторых различий типов данных в MS SQL и PostgreSQL.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Введение в SQL-инъекции

В этом ролике разберемся что такое базы данных и изучим основы SQL. Это видео первое из серии, посвященной изучению SQL-инъекций.

Смотреть это видео на youtube: youtu.be/4t16wXJXM-A

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Проблемы при переходе с MS SQL на PostgreSQL: активное использование временных таблиц

В этой статье автор подробно расскажет о наиболее распространенной проблеме, возникающей при переходе с MS SQL на PostgreSQL.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Хочешь разбираться в 1С?

Для тебя уже всё сделали.
⚙️ Канал 1С Hacks рассказывает обо всех возможностях, приёмах и лайфхаках по работе в 1С.

Подписывайтесь и прокачивайте свои навыки: @secrets_1C

Читать полностью…

Базы данных | Access, SQL, Big Data

Что такое GraphQL с примерами

00:59 Что такое GraphQL и откуда он взялся
01:55 Чем GraphQL лучше, чем REST API
04:03 Графовая структура
04:45 Типы запросов
07:00 Основные концепции в GraphQL
12:07 Схема
14:09 Преимущества

Смотреть это видео на youtube: youtu.be/Xkx5wroOt7o

Читать полностью…

Базы данных | Access, SQL, Big Data

Лень разбираться в PowerPoint?

Для вас уже всё сделали.
📌 Канал Секреты презентаций расскажет обо всех приёмах, возможностях и лайфхаках по работе в powerpoint.

Подписывайтесь и прокачивайте свои навыки: @powerpoint

Читать полностью…

Базы данных | Access, SQL, Big Data

Сортировка в SQL

В этом видеоуроке автор подробно разбирает процесс сортировки данных в SQL с использованием оператора ORDER BY.

00:00 Сортировка в SQL
01:50 Порядок сортировки: ASC, DESC
03:19 Совместное использование сортировки и фильтрации
04:21 Ограничение количества выбираемых строк
05:36 Сортировка по нескольким столбцам
06:46 SQL как английский
08:34 Итоги

Смотреть это видео на youtube: youtu.be/bYdjR6QexJY

Читать полностью…

Базы данных | Access, SQL, Big Data

Всё что нужно знать про DuckDB

DuckDB — это хороший инструмент для взаимодействия с данными. Он позволяет через единый интерфейс (SQL) общаться с разными сервисами и форматами файлов.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL простыми словами

В этой статье автор собрал все, что нужно знать об SQL на первых порах: привел реальные кейсы использования языка запросов и показал, как написать ваш первый код.

Базы данных

Читать полностью…
Subscribe to a channel