databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

Нейросети обсуждают повсюду, но в МегаФоне решили пойти дальше и провести Data Science-Митап для специалистов в области Big Data!

На митапе вас ждут:
— Доклады от специалистов по Data Science о работе с LLM;
— Реальные кейсы по применению ИИ в МегаФоне и других компаниях;
— Нетворкинг и интерактивы с призами от компании.

Когда? 19 октября в 17:00

Где?
💡Офлайн: в главном офисе компании МегаФон г. Москва
💻Онлайн

Регистрируйтесь на митап, чтобы перенять опыт экспертов крупных компаний: https://u.to/dmoDIA

Реклама, ПАО "МегаФон", ИНН 7812014560, erid 2VtzqvvMihq

Читать полностью…

Базы данных | Access, SQL, Big Data

Срочно требуются сотрудники на удалёнку (подработка)!

Зарплата - от 2.900 ₽ в день.
vakanser.ru открывает доступ к вакансиям:

— Задача: Перепечатать текст в Word (35 страниц) - 37 000₽
— Задача: Просмотр ролика (оставить отзыв) - 2900₽
— Вакансия: Администратор каналов (без опыта) - 4000₽ в день

Платят хорошо, опыт не обязателен

❗️Обращаем ваше внимание, канал закрытый!
Бесплатный доступ в
@vakanser открыт только на 24 часа!

Читать полностью…

Базы данных | Access, SQL, Big Data

Что значит быть дата-инженером?

Присоединяйся к бесплатной Q&A сессии:
Расскажем
, что такое быть дата-инженером, как им стать, и как развиваться в профессии.

Все в формете Q&A, задавай любые вопросы опытным дата-инженерам. Помни, самый глупый вопрос – незаданный 😉

Кому будет полезно:
✅ junior DE - если только начинаешь свой путь дата-инженера, сможешь задать вопрос опытным коллегам
✅ DS и DA - сможешь узнать больше о типах задач, с которыми работают дата-инженеры
✅ разработчики - если хочешь сменить профессию, попробовать свои силы в данных, то вебинар поможет разобраться с вектором развития
✅ техлиды и менеджеры - вебинар поможет определить направление развития вашей дата-команды

Бонусы зарегистрированным: разыграем 2 бесплатных места на поток «Data-Engineer 13.0». Дополнительно два счастливчик получат скидку 50%.

Спикеры:
🕶 Игорь Мосягин, Klarna
🧢 Алексей Ница, NewProLab


📅Дата: 10 октября 2023
🕗Время: 20:00 по МСК
🔵Место: YouTube


🔗[Записаться на бесплатный вебинар]

Читать полностью…

Базы данных | Access, SQL, Big Data

Оконные функции SQL простым языком с примерами

Данная статья написана исключительно для людей, которые начинают свой путь в изучении SQL и оконных функций. Здесь могут быть не разобраны сложные применения функций и могут не использоваться сложные формулировки определений - все написано максимально простым языком для базового понимания.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

NoSQL простым языком: что это и зачем нужно?

NoSQL — тип баз данных, которые хранят данные в отличном от реляционных таблиц формате. Они узкоспециализированны для конкретных задач и нужны для улучшения производительности, масштабируемости и удобства в работе. В этом ролике автор подробно и наглядно разберёт данный тип БД.

Смотреть это видео на youtube: youtu.be/IBzTDkYNB7I

Читать полностью…

Базы данных | Access, SQL, Big Data

Как работает миграция между базами данных в реальном мире

В этом материале автор подробно поделиться своими исследованиями в сфере миграции данных между базами.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

2003–2023: Краткая история Big Data

Большие данные (Big Data) и, в частности, экосистема Hadoop появились немногим более 15 лет назад и развились к сегодняшнему дню так, как мало кто мог тогда предположить. Так что пристегнитесь и настройтесь на путешествие во времени вглубь 20 последних лет, поскольку наша история начинается в 2003 году в маленьком городке к югу от Сан-Франциско.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Big Data в облаках

В этом материале автор делает обзор облачных решений, которые могут быть полезны для задач хранения больших данных, а также разбирает вопрос выбора облачного хранилища. Статья может быть интересна как разработчикам, дата-инженерам, так и менеджерам, отвечающим за корпоративную Big Data-инфраструктуру и ищущим возможности ее масштабировать.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Иерархические (рекурсивные) запросы

При построении SQL-запросов иногда может потребоваться соединение таблицы с самой собой. Например, если таблица содержит список сотрудников с указанием должностной подчиненности, или филиалов и входящих в них под-филиалов, то можно вывести всю иерархию одним запросом, дописав всего лишь несколько слов. В этом видеоуроке автор подробно разбирает такие иерархические (рекурсивные) запросы.

Смотреть это видео на youtube: youtu.be/9_MuOe6KrmE

Читать полностью…

Базы данных | Access, SQL, Big Data

Лучшие практики при работе с мастер-данными

Основная цель управления мастер‑данными — сформировать единое представление об объектах, над которыми компания осуществляет свою деятельность. В этой статье автор поделится лучшими практиками в этом направлении. При этом призывает вас оценивать влияние и принимать собственное решение о применимости практики в вашем кейсе.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Работа с SQLite в Python (для чайников)

В этом руководстве автор покрывает все основные аспекты использования SQLite, начиная с установки и создания базы данных, и заканчивая выполнением сложных запросов и управлением транзакциями.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Базы данных: большой обзор типов и подходов.

В этом материале вы узнаете, какие бывают базы данных, какие их особенности важно помнить, как в работе с данными учитывать характеристики системы и планы масштабирования, в какую из тем нужно углубиться для решения конкретной задачи. А также как при возникновении багов определить, является ли работа с БД источником проблемы (и если да, то в какую сторону копать).

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Функции SQL для даты и времени

В этом видеоуроке автор подробно разбирает функции SQL, необходимые для работы с датой и временем.

00:00 Вступление
00:27 Получение системной даты и времени (SYSDATE)
01:05 Преобразовать строку в дату (TO_DATE)
01:59 Получить последний день месяца (LAST_DAY)
02:28 Добавить N-ое количество месяцев (ADD_MONTHS)
02:57 Извлечь год, квартал, месяц (EXTRACT)
03:14 Получить первый день года, квартала, месяца или недели (TRUNC)

Смотреть это видео на youtube: youtu.be/_6XWUJ2zf8Y

Читать полностью…

Базы данных | Access, SQL, Big Data

Нормализация и денормализация базы данных

Понимание нормализации и денормализации - это основа основ SQL. Если кратко, нормализованное состояние БД удобно для хранения и редактирования данных, а денормализованное - для отображения.

SQL имеет большое количество инструментов, как из нормального состояния преобразовать таблицы в денормализованные, одна из таких возможностей - это объединение таблиц через FROM и перечисление нескольких таблиц.

Умение склеивать таблицы разными способами поможет вам на собеседовании, а также облегчит понимание темы JOIN в SQL.

00:00 Введение
00:25 Нормализованная структура БД
00:40 Денормализовання структура БД
01:28 Анализ БД
02:25 Первичный и внешний ключ SQL
05:16 Склейка через FROM и псевдонимы
09:19 SELECT с указанием таблицы
11:37 Целостность баз данных

Смотреть это видео на youtube: youtu.be/oOJgHQ5Yuto

Читать полностью…

Базы данных | Access, SQL, Big Data

Схема базы данных

В этом ролике автор подробно и наглядно рассматривает процесс построения схем баз данных.

00:00 Схема базы данных
00:48 Таблицы на схеме
01:20 Столбцы и типы данных
02:26 Связи между таблицами
02:49 Типы связей между таблицами
04:42 Примеры таблиц базы данных
06:11 Пример SQL запроса с JOIN для извлечения данных
08:07 Пример использования для объединения трех таблиц
10:38 Итоги
12:05 Инструмент для создания схем DrawSQL

Смотреть это видео на youtube: youtu.be/d67ZjgY12G8

Читать полностью…

Базы данных | Access, SQL, Big Data

Партицирование как средство быстрого обновления данных

В этой статье автор рассмотрит, как частично обновить большой объем данных в таблицах, которые активно используются пользователями на чтение. Задача является типовой, и с ней сталкивается каждый инженер данных.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Многоуровневая группировка в SQL: Grouping sets

Описан основной принцип работы конструкции Grouping sets в SQL на примере. Статья будет полезна для тех, кто хочет быстро разобраться с основными принципами группировки с использованием Grouping sets.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы SQL

В этом видео автор собрал все основные темы по SQL и примеры выполнения различных SQL-запросов, которые пригодятся начинающим разработчикам.

00:47 Что такое SQL и РБД?
01:20 Таблица, столбцы и типы данных
01:46 CREATE TABLE
02:23 SELECT FROM
03:03 Вычисление информации
03:47 WHERE
04:04 ORDER BY
04:54 GROUP BY
05:43 Приоритет операций
06:09 HAVING
06:41 Вложенные запросы
07:40 Вставка данных из другой таблицы
08:56 Связи между таблицами
10:10 JOIN
12:43 Заключение

Смотреть это видео на youtube: youtu.be/PmOSrf1Rxhg

Читать полностью…

Базы данных | Access, SQL, Big Data

#вакансия #job #remote #parttime #educator #преподаватель #dataengineer #ckickhouse #databasearchitect #database #sql

Всем привет! 👋🏻 Время делиться знаниями! 🔥

Компания: OTUS – образовательная платформа. За 6 лет работы мы создали более 130 авторских курсов для IT-специалистов разного уровня от Junior до Senior. У нас есть вступительное тестирование для студентов и 650+ преподавателей-практиков из крупнейших компаний. Мы учимся друг у друга, советуемся, помогаем, делимся опытом и обсуждаем новости как в преподавании, так и в IT.

Вакансия: преподаватель онлайн-курсов:
«Clickhouse для инженеров и архитекторов БД» с опытом работы с Clickhouse от 3-x лет. Подробную программу курса можно посмотреть здесь.
«PostgreSQL для администраторов баз данных и разработчиков» с опытом работы с PostgreSQL от 3-х лет.
Подробную программу можно посмотреть здесь.

👨‍🏫 Опыт преподавания также будет плюсом, но это совсем необязательно. Мы с удовольствием поможем Вам освоить Best Practices преподавания: для этого у нас есть вводный курс по преподаванию и пробные уроки с методистом.

Преподаватель раскрывает тему с помощью теории и примеров из практики.
Можно выбрать комфортную нагрузку и интересные Вам темы занятий.

Условия:
✅ удаленное сотрудничество, занятость part-time.
✅стандартное занятие длится 1,5 часа с 20:00 до 21:30 по МСК.
✅ уроки проводятся в онлайн формате в Zoom.
✅ на занятиях используется презентация с теорией и практические примеры, чтобы раскрыть тему урока.
✅ наши методисты помогают освоить лучшие инструменты и практики преподавания.

Еще Вы сможете:
✅ внести свой вклад в развитие IT
✅ структурировать свой опыт и знания.
✅ развивать личный бренд.
✅ прокачать софт-скиллы.
✅ получать от 3000 руб. за один вебинар (полтора часа) + отдельно оплачивается проверка ДЗ и разработка материалов к занятиям.

Бонусы 🎁
✅ наши курсы со скидкой/бесплатно.
✅ возможность приглашать в свою команду на работу лучших выпускников.
✅ воркшопы и конференции для наших преподавателей.

Подробнее в telegram: @ElenaAlias

Читать полностью…

Базы данных | Access, SQL, Big Data

Хочешь разбираться в Linux?

Для тебя уже всё сделали.
🐧 Канал DevOps School делится полезными приёмами и лайфхаками Linux, DevOps и информационной безопасности.

Подписывайтесь и прокачивайте свои навыки: @devops_sc

Читать полностью…

Базы данных | Access, SQL, Big Data

Сбер расширяет географию своих ивентов: 10 октября в Стамбуле состоится первый технологический митап, посвящённый разработке рекомендательных систем 👨‍💻

На RecSys MeetUp вы познакомитесь с экспертами Сбера, станете частью одного из крупнейших IT-комьюнити и узнаете о:

✔️ Технологических трендах в области искусственного интеллекта и машинного обучения.

✔️ Устройстве современных стримингов компаний-партнёров Сбера.

Гарантируем: будет интересно и безумно полезно каждому DS-специалисту. Регистрируйтесь по ссылке, встречаемся 10 октября в 18:30 по адресу: Стамбул, Сарыер, махалле Маслак, улица Ахи Эвран, 6, метро СТУ – Айязага, Небоскреб «Маслак, 42 💚

Читать полностью…

Базы данных | Access, SQL, Big Data

Снижаем трудозатраты на разработку и поддержку ETL процессов с помощью open source фреймворка для базы данных Greenplum и ее коммерческой сборки Arenadata DB

Приглашаем на вебинар, на котором разберем подходы и кейсы использования фреймворка, выполняющего следующие задачи:

➡️ стандартизация ETL процессов,
➡️ загрузка и расчет данных с помощью метаданных и минимального объема разработок.

Фреймворк был разработан экспертами компании Sapiens solutions и доступен на GitHub как Open source по лицензии Apache 2.0

Вебинар будет полезен для компаний, которые планируют использовать хранилище данных на платформе Arenadata DB / Greenplum и проектов миграции хранилищ данных с проприетарных DB (SAP HANA, Oracle, Teradata и др.)

Рассмотрим вопросы:
1. Проблемы в процессах ETL
2. Подходы к загрузке в Greenplum
3. Преимущества ETL фреймворка
4. Компоненты фреймворка
5. Развертывание и использование
6. Продуктивные кейсы

📌Всем зарегистрированным будет отправлена запись вебинара.


Спикеры:

Юрий Ефаров
- Основатель и CEO Sapiens solutions (в ТОП-15 поставщиков аналитических решений в РФ)

Дмитрий Исмаилов - Архитектор хранилищ данных, эксперт в вопросах миграции на Greenplum.

Регистрируйтесь по ссылке.

🗓 03 октября, 11:00 мск • Онлайн

Реклама. ООО «Сапиенс солюшнс». ИНН 7725294897. erid: 2VtzqwngDnA

Читать полностью…

Базы данных | Access, SQL, Big Data

Welcome to PG BootCamp Russia!

🎊5 октября в Москве состоится первая большая практическая конференция PG-сообщества в России.

Мероприятие признано глобальным сообществом PostgreSQL и вносит непосредственный вклад в его развитие.

Вас ждут мастер-классы:
- билдь или не билдь..., или Как достойно собрать PostgreSQL из исходников;
- эксплуатация исторических уязвимостей;
- что потребуется начинающему разработчику PostgreSQL?
- сравнение GP ORCA с оптимизатором PostgreSQL на практике;
- как написать расширение PostgreSQL?
- эффективная работа с psql

🎤 Список спикеров впечатляет: Максим Милютин (Huawei RRI), Михаил Гольдберг (член комитета и председатель PostgreSQL Code of Conduct), Вадим Яценко (генеральный директор «Тантор Лабс»), Андрей Бородин (Yandex Cloud) и другие.

Зарегистрируйтесь сейчас и подготовьтесь к захватывающему путешествию в мир СУБД!

Участие в конференции бесплатное, предусмотрена онлайн-трансляция (также по предварительной регистрации).

Читать полностью…

Базы данных | Access, SQL, Big Data

Сбер расширяет географию своих ивентов: 6 октября в Тбилиси состоится первый технологический митап, посвящённый разработке рекомендательных систем 👨‍💻

На RecSys MeetUp вы познакомитесь с экспертами Сбера, станете частью одного из крупнейших IT-комьюнити и узнаете о:

✔️ Технологических трендах в области искусственного интеллекта и машинного обучения.

✔️ Устройстве современных стримингов компаний-партнёров Сбера.

Гарантируем: будет интересно и безумно полезно каждому DS-специалисту. Регистрируйтесь по ссылке, встречаемся 6 октября в 18:30 по адресу: Тбилиси, Ресторан на 6 этаже отеля «Golden Palace», переулок Агмашенебели 62 💚

Читать полностью…

Базы данных | Access, SQL, Big Data

Enterprise Data Warehouse: компоненты, основные концепции и типы архитектур

В этой статье автор разберет, что такое EDW, каких типов они бывают и какие функции имеют, а также как они используются в обработке данных. Вы узнаете, чем корпоративные хранилища отличаются от обычных, какие типы хранилищ данных существуют и как они работают. В первую очередь автор дает информацию о ценности для бизнеса каждого архитектурного и концептуального подхода к построению хранилища.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

СУБД ClickHouse: настоящее и будущее

В этом видео автор поделится основными принципами и целями развития ClickHouse, отличительными чертами и преимуществами системы, которые планируют развивать. Также автор рассмотрит недостатки и неудобства системы.

Помимо этого вы познакомитесь с некоторыми новыми возможностями ClickHouse, которые раньше сложно было даже представить.

Смотреть это видео на youtube: youtu.be/qeZOT8B8QiA

Читать полностью…

Базы данных | Access, SQL, Big Data

NULL в SQL: что это такое и почему его знание необходимо каждому разработчику

NULL - это специальное значение, которое используется в SQL для обозначения отсутствия данных. Оно отличается от пустой строки или нулевого значения, так как NULL означает отсутствие какого-либо значения в ячейке таблицы. Подробнее о NULL читайте в этой статье.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы SQL: Подзапросы

В этом видео автор подробно и наглядно разбирает работу с подзапросам в SQL.

00:00 Подзапросы в SQL (subqueries)
00:52 Запуск подзапросов в SELECT
02:01 Подзапрос, возвращающий список значений
04:25 Подзапросы в UPDATE
05:57 Итоги

Смотреть это видео на youtube: youtu.be/Df6tQlWhn3Q

Читать полностью…

Базы данных | Access, SQL, Big Data

Big Data

В этом ролике авторы обсуждают следующие вопросы: что такое большие данные, кто такие data scientist специалисты, как управлять data специалистами, зачем каждой компании нужно задуматься о больших данных и др.

00:00 Вступление
00:50 Почему большие данные — это важно
03:25 Магия и Big data
06:42 Как сейчас большие данные помогают в ритейле
13:20 Про историю взаимодействия с клиентом
14:49 Кто такие data scientist специалисты
18:20 Как управлять data специалистами
22:55 Про эффективного руководителя
32:01 Развитие сотрудников, ответственность и гордыня
36:48 Что нужно молодым программистам
42:30 Про проведение изменений в большой компании

Смотреть это видео на youtube: youtu.be/eGWYKmX7PoI

Читать полностью…

Базы данных | Access, SQL, Big Data

SQL Injection: теории и примеры

В предыдущем своем видео автор рассматривал SQL Injection сразу на практике, а в этом новом ролике возвращается на шаг назад и говорит чуть более подробно о самой теории и разбирает несколько небольших примеров.

Смотреть это видео на youtube: youtu.be/VAMWNjm4DZY

Читать полностью…
Subscribe to a channel