30088
Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h
Что такое Data Service и почему он может быть вам полезен
Сегодня компании собирают огромное количество данных разных типов и качества. Естественно, эти данные нужно хранить, обрабатывать и находить им применение. В данной статье автор расскажет, как это происходит в его компании.
Базы данных
Трассировка запросов в Postgres с расширением pg_trace
В этой статье автор расскажет о расширении pg_trace, предназначенном для сбора трассировок запросов в PostgreSQL, соберет трассировку на реальном примере работы приложения, оценит влияние сбора трассировки на производительность и агрегирует данные трассировки.
Базы данных
Big Data
В этом ролике авторы обсуждают следующие вопросы: что такое большие данные, кто такие data scientist специалисты, как управлять data специалистами, зачем каждой компании нужно задуматься о больших данных и др.
00:00 Вступление
00:50 Почему большие данные — это важно
03:25 Магия и Big data
06:42 Как сейчас большие данные помогают в ритейле
13:20 Про историю взаимодействия с клиентом
14:49 Кто такие data scientist специалисты
18:20 Как управлять data специалистами
22:55 Про эффективного руководителя
32:01 Развитие сотрудников, ответственность и гордыня
36:48 Что нужно молодым программистам
42:30 Про проведение изменений в большой компании
Смотреть это видео на youtube: youtu.be/eGWYKmX7PoI
Вся мощь открытого исходного кода в PostgreSQL
В этом материале автор разбирает мощь и преимущества использования открытого исходного кода в PostgreSQL, а также его влияние на развитие технологий и сообщества.
Базы данных
Зачем нужен fillfactor в PostgreSQL
Один параметр PostgreSQL может похоронить вашу производительность, если вы о нём забудете — это fillfactor. Почему однократная настройка числа приводит к неожиданным page split, bloat и мучительному откату запросов? Давайте разбираться.
Базы данных
Модель SQLAlchemy с базой данных SQL Server в Python
В этой статье автор покажет, как создать модель на основе существующей базы данных SQL Server, используя ту же файловую структуру, чтобы сохранить организованность вашего проекта. Это означает, что каждый класс и модель базы данных будут храниться в отдельном файле.
Базы данных
Классификация и область применения различных типов баз данных
В этом видео автор представляет полную классификацию существующих баз данных. Вы разберете их преимущества, недостатки, область применения, а также популярность по отношению друг к другу.
00:00 Введение
01:13 Общий обзор разновидностей баз данных
08:54 Временная шкала развития БД
10:50 График популярности разных БД
12:04 Oracle
14:32 MySQL
16:10 MariaDB
17:34 Microsoft SQL Server
19:15 PostgreSQL
20:41 MongoDB (документо-ориентированная)
23:27 Redis ("ключ-значение")
24:29 ElasticSearch (поисковая)
25:16 Cassandra (многостолбцовая)
26:30 Neo4j (графовая)
27:25 Couchbase (многомодельная)
28:29 InfluxDB (временные ряды)
32:43 Итоги
Смотреть это видео на youtube: youtu.be/_Ucy2TtHqBM
DevOps для данных: как ускорить обработку и передачу информации за счет принципов DataOps
DevOps — это набор принципов, лучшие практики и инструменты, которые помогают компаниям быстро разрабатывать и доставлять ПО. Суть этого подхода заключается в максимальной автоматизации продуктового жизненного цикла — создания, тестирования, развертывания и т.д. DataOps описывают как DevOps, только применительно к данным. Продукты данных (data product) добавляют больше переменных в процессы, относящиеся к доставке ценности, а не к ПО.
Базы данных
Лень разбираться в PowerPoint?
Для вас уже всё сделали.
📌 Канал Секреты презентаций расскажет обо всех приёмах, возможностях и лайфхаках по работе в powerpoint.
Подписывайтесь и прокачивайте свои навыки: @powerpoint
В бизнесе одно неверное решение может стоить миллионов.
Предусмотреть многие риски перед тем, как принять решение, помогают A/B‑тесты. Научиться их проводить можно на симуляторе от karpovꓸcourses.
Вместо скучной теории — практика на реальных бизнес-сценариях. Вас ждут шумы, нестабильные данные, ошибки в измерениях — как в настоящем аналитическом процессе. Сможете отточить навыки до автоматизма и будете готовы к разным рабочим ситуациям.
Уметь писать код не обязательно. У симулятора две версии:
1. Базовая — достаточно математики на уровне школьной программы.
2. Продвинутая — понадобится знание Python.
С 12 по 31 мая действует майское комбо. Если купите курсы «Симулятор аналитика» и «Симулятор А/B-тестов» вместе, получите скидку 8%. Они дополняют друг друга и дают полный набор навыков для работы с данными.
На «Симуляторе аналитика» получите базовые знания: сбор, визуализация и базовый анализ данных. На курсе по A/B‑тестам — научитесь проводить эксперименты и принимать решения на основе данных.
Реклама. ООО «Карпов Курсы», ИНН: 7811764627, erid: 2VtzqxZCdWL
Работай на одной волне с технологиями 🌊
Сбер ищет лидера аналитики в команду Process Mining.
Эта работа для тех, кто умеет находить недочёты в сложных системах и превращать данные в решения, которые действительно работают.
Платформа Sber Process Mining помогает бизнесу видеть процессы насквозь — и ты станешь тем, кто делает это возможным.
Что ты получишь:
✔️ расширенный ДМС и страхование для семьи
✔️ премии и ежегодный пересмотр зарплаты
✔️ льготную ипотеку и корпоративную пенсионную программу
✔️ подписку СберПрайм+ и скидки от партнёров
Работа в сильной команде, умные задачи, развитие — всё это возможно здесь!
👩💻 Всем программистам посвящается!
Вот 17 авторских обучающих IT каналов по самым востребованным областям программирования:
Выбирай своё направление:
👩💻 Python — t.me/python_ready
🖥 Базы Данных & SQL — t.me/sql_ready
🖼️ DevOps — t.me/devops_ready
🤔 Хакинг & ИБ — t.me/hacking_ready
👩💻 Linux — t.me/linux_ready
👩💻 Bash & Shell — t.me/bash_ready
👩💻 Всё IT — t.me/it_ready
👩💻 Java — t.me/java_ready
👩💻 Нейросети — t.me/neuro_ready
👩💻 C/C++ — /channel/cpp_ready
👩💻 C# & Unity — t.me/csharp_ready
📱 GitHub — t.me/github_ready
👩💻 Frontend — t.me/frontend_ready
📱 JavaScript — t.me/javascript_ready
👩💻 Backend — t.me/backend_ready
📖 IT Книги — t.me/books_ready
🖥 Design — t.me/design_ready
📌 Гайды, шпаргалки, задачи, ресурсы и фишки для каждого языка программирования!
Практика по SQL: группировка, сортировка и LIMIT
В этом видеоуроке автор рассматривает пример использования группировки, сортировки и LIMIT в SQL.
0:00 Описание задачи
2:07 Создание копии данных в PostgreSQL
3:00 Поиск количества заказов с GROUP BY
3:58 Ограничение количества строк с помощью LIMIT
4:42 Сортировка сгруппированных данных с ORDER BY
6:06 Запускаем запрос на Leetcode
7:18 Итоги
Смотреть это видео на youtube: youtu.be/xQDuVztZ338
Основы SQL
В этом видео автор собрал все основные темы по SQL и примеры выполнения различных SQL-запросов, которые пригодятся начинающим разработчикам.
00:47 Что такое SQL и РБД?
01:20 Таблица, столбцы и типы данных
01:46 CREATE TABLE
02:23 SELECT FROM
03:03 Вычисление информации
03:47 WHERE
04:04 ORDER BY
04:54 GROUP BY
05:43 Приоритет операций
06:09 HAVING
06:41 Вложенные запросы
07:40 Вставка данных из другой таблицы
08:56 Связи между таблицами
10:10 JOIN
12:43 Заключение
Смотреть это видео на youtube: youtu.be/PmOSrf1Rxhg
Выполнение CRUD операций с использованием JavaScript и SQL
Одним из наиболее распространенных и фундаментальных способов управления данными в базах являются операции CRUD: Create, Read, Update, Delete.
В этой статье автор разберет, как точно выполнять каждую из этих операций, используя язык программирования JavaScript в сочетании с языком структурированных запросов SQL.
Базы данных
Нормализация и денормализация базы данных
Понимание нормализации и денормализации - это основа основ SQL. Если кратко, нормализованное состояние БД удобно для хранения и редактирования данных, а денормализованное - для отображения.
SQL имеет большое количество инструментов, как из нормального состояния преобразовать таблицы в денормализованные, одна из таких возможностей - это объединение таблиц через FROM и перечисление нескольких таблиц.
Умение склеивать таблицы разными способами поможет вам на собеседовании, а также облегчит понимание темы JOIN в SQL.
00:00 Введение
00:25 Нормализованная структура БД
00:40 Денормализовання структура БД
01:28 Анализ БД
02:25 Первичный и внешний ключ SQL
05:16 Склейка через FROM и псевдонимы
09:19 SELECT с указанием таблицы
11:37 Целостность баз данных
Смотреть это видео на youtube: youtu.be/oOJgHQ5Yuto
Восхитительная теория якорных баз данных
Transitional Modeling призвано отразить происходящие в реальной жизни события в простом, но эффективном формате, минимизируя при этом потерю информации в процессе записи таких событий. По своей сути оно сообщает об объектах и разнообразных, многогранных ситуациях, в которых эти объекты оказываются.
Базы данных
Как мы переносили базу Clickhouse между географически удаленными дата-центрами
В этой статье автор рассказывает, как в его компании переносили данные, не имея возможности отключить сервис или воспользоваться автоматической репликацией.
Базы данных
Схема базы данных
В этом ролике автор подробно и наглядно рассматривает процесс построения схем баз данных.
00:00 Схема базы данных
00:48 Таблицы на схеме
01:20 Столбцы и типы данных
02:26 Связи между таблицами
02:49 Типы связей между таблицами
04:42 Примеры таблиц базы данных
06:11 Пример SQL запроса с JOIN для извлечения данных
08:07 Пример использования для объединения трех таблиц
10:38 Итоги
12:05 Инструмент для создания схем DrawSQL
Смотреть это видео на youtube: youtu.be/d67ZjgY12G8
SQL: бесплатные курсы и тренажёры, которые стоит попробовать
В этой подборке вы найдёте ресурсы, которые помогут освоить основы, потренироваться в написании запросов и расширить знания о работе с базами данных. Многие из них интерактивные, что позволяет сразу перейти к практике и углубиться в интересующие темы.
Базы данных
Yandex B2B Tech представила платформу YTsaurus как сервис в Yandex Cloud
YTsaurus — это масштабируемая платформа для хранения и обработки больших данных, ранее использовавшаяся в проектах Яндекса и доступная в open source. Теперь она доступна внешнему бизнесу как управляемый облачный сервис.
Платформа поддерживает широкий набор инструментов — ClickHouse, Apache Spark, MapReduce — и позволяет работать с различными типами данных: структурированными, полуструктурированными и неструктурированными. Она подходит для построения дата-хранилищ, реализации ETL-процессов и обучения ML-моделей.
YTsaurus масштабируется под задачи любой сложности, обеспечивая устойчивую работу даже при больших вычислительных нагрузках. Новый формат поставки в облаке упрощает подключение и техническое сопровождение, позволяя сосредоточиться на решении прикладных задач.
Как ускорить базу данных при помощи шардирования
Шардирование было одним из первых механизмов, позволяющих распределять базы данных для повышения их производительности. Последние инновации превратили шардирование в один из лучших механизмов в своем роде.
Базы данных
Как заставить вашу базу данных летать, а не ползать: масштабирование и репликация
Автор подготовил ультимативный гайд по оптимизации или хорошему, грамотному проектированию баз данных с расчетом на масштабирование. Всего в цикле будет 3 статьи. В первой поговорим о двух разных подходах масштабирования БД и о том, как лучше его делать и как лучше не делать.
Базы данных
SQL Injection: теории и примеры
В предыдущем своем видео автор рассматривал SQL Injection сразу на практике, а в этом новом ролике возвращается на шаг назад и говорит чуть более подробно о самой теории и разбирает несколько небольших примеров.
Смотреть это видео на youtube: youtu.be/VAMWNjm4DZY
Максимизация производительности ScyllaDB
ScyllaDB — это высокопроизводительная распределённая NoSQL база данных, совместимая с Apache Cassandra на уровне протокола, но предлагающая значительно более высокую пропускную способность и меньшую задержку. ScyllaDB подходит для приложений, требующих обработки больших объёмов данных в реальном времени, таких как системы аналитики, IoT или платформы потоковой передачи данных.
Базы данных
30 SQL-запросов, объяснённых через их эквиваленты Pandas
В 2008 году появился Pandas, предлагающий привлекательные функции, такие как встроенная визуализация и гибкая обработка данных. Pandas быстро стал популярным инструментом для исследования данных. Но SQL по-прежнему держит свои позиции и остаётся жизненно важным навыком для любого специалиста по данным.
В этом материале автор разберет как легко выучить SQL, если вы уже знаете Pandas.
Базы данных
Clickhouse — непростая жизнь в продакшене
Автор столкнулся со сложностями при попытке решить задачи проекта с помощью kafka-streams. Эксперимент вышел неудачным, и в итоге команда отказалась от этой технологии. Вместо нее решили попробовать Clickhouse (CH), эта база хорошо подошла и отлично решает почти все задачи, которые ставит бизнес. В данной статье автор расскажет об особенностях использования CH.
Базы данных
MySQL репликация: проблемы, решения, практические рекомендации
Вопрос "какая репликация MySQL лучшая?" звучит часто. Ответ, как водится, в сложных системах, – "зависит от ситуации". Нет универсального решения. Выбор оптимального метода репликации - всегда компромисс.
Базы данных
Хочешь разбираться в Linux?
Для тебя уже всё сделали.
🐧 Канал Секреты Сисадмина делится полезными инструментами, приёмами и лайфхаками системного администрирования, DevOps и Linux.
Подписывайтесь и прокачивайте свои навыки: @sysadmin_library
❓Зачем Data Scientist изучать ML?
Машинное обучение — это не просто модное словосочетание. Это основа Data Science, без которой успешная карьера в этой области невозможна. Вы не сможете работать с большими данными и обучать ИИ, если не освоите методы ML.
На открытом вебинаре 19 мая в 18:00 мск вы узнаете, зачем вам ML, и научитесь решать реальную задачу: классифицировать изображения с помощью машинного обучения.
📣 Спикер Мария Тихонова – PhD Computer Science, Senior Data Scientist и преподаватель в одном из крупнейших университетов России.
➡️ Записывайтесь на открытый вебинар и получите скидку на большое обучение «Специализация Machine Learning»: https://vk.cc/cLY3WZ
Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576