databases_secrets | Unsorted

Telegram-канал databases_secrets - Базы данных | Access, SQL, Big Data

30088

Всё о базах данных простым языком. Сотрудничество: @max_excel РКН: vk.cc/cHhG5h

Subscribe to a channel

Базы данных | Access, SQL, Big Data

Оптимален ли блокчейн для хранения идентификационных данных?

Одним из известных направлений применения блокчейн-технологий является хранение идентификационных данных граждан. В этой статье автор рассмотрит варианты хранения идентификационных данных на основе блокчейн-технологий и традиционных баз данных и сравнит подобные решения для формулировки вывода об оптимальной технологии для данного применения.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Ключи в базе данных

Автор этого материала решила разобраться с разными видами ключей в базе данных и с тем, как они связаны между собой. Она начала искать разные статьи по этой теме, но многие вопросы так и остались нераскрытыми. В итоге она стала изучать документацию PostgreSQL и теорию реляционных баз данных, но, чтобы получить ответы, пришлось все проверять на практических примерах.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как стать классным спецом по базам данных?

Системы хранений и манипуляции данными в том или ином виде есть в любом хайлоад-проекте, как традиционные MySQL/PostgreSQL, так и экзотические.

Как разобраться в этом постоянно растущем и изменяющемся ворохе технологий? В этом видео автор подробно разбирается в данном вопросе.

Смотреть это видео на youtube: youtu.be/SpLVs6lfXps

Читать полностью…

Базы данных | Access, SQL, Big Data

AI в энтерпрайзе

Основные проблемы в корпоративном IT это, как и прежде — инфраструктура, безопасность и работа с данными. AI и, так называемые, Агенты AI в этой сфере в ближайшие 2-3 года мало что поменяют. В корпоративном секторе столько неэффективности и реакционности, что буст продуктивности, который принесет AI, станет каплей в море. Миграция с Oracle на Postgresql или переезд с Lotus Domino для большинства крупных не-IT компаний принесет больше пользы, чем внедрение AI, здесь и сейчас.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Ищете где скачать Excel?

Хватит мучиться, воспользуйтесь интернет-магазином с оригинальными ключами KeySoft. Вы сможете приобрести лицензионный продукт, в котором будут доступны все функции без каких-либо ограничений:

• Лицензионная подписка для Office 365 Pro+

• Лицензионный ключ активации для Office 2021 Professional Plus

Преимущества KeySoft:
✔️ широкий ассортимент
✔️ только официальные продажи
✔️ разнообразие способов оплаты
✔️ быстрая и квалифицированная техподдержка
✔️ более 3000 положительных отзывов на независимых ресурсах.

На все товары Microsoft действует промокод на скидку 5% — NEW5 — успейте воспользоваться!

Читать полностью…

Базы данных | Access, SQL, Big Data

Практика SQL (часть 1)

Если ты в ИТ, то тебе точно нужен SQL, а вот необходимый уровень будет колебаться в зависимости от того, какая у тебя роль и грейд.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Функции SQL для символьных данных

В этом видеоуроке автор подробно разбирает процесс работы с символьными (строчными) функциями в SQL.

00:00 Вступление
00:18 Преобразование строки в нижний регистр (LOWER)
00:32 Преобразование строки в верхний регистр (UPPER)
00:55 Получение длины указанной строки (LENGTH)
01:06 Вернуть символ, заданный числовым кодом (CHR)
01:28 Соединить вместе две и более строки (CONCAT)
01:57 Удалить символ с начала или конца строки (TRIM)
02:22 Посимвольная замена значений (TRANSLATE)
03:25 Замена слова в строке другим словом (REPLACE)
04:03 Извлечь часть данных из строки (SUBSTR)

Смотреть это видео на youtube: youtu.be/myYvKpjquGw

Читать полностью…

Базы данных | Access, SQL, Big Data

Горизонтальное масштабирование базы данных: репликация, партицирование, шардирование

В современном мире нагрузка на базы данных стремительно растёт. Когда один сервер перестаёт справляться с объёмом запросов, встаёт вопрос о масштабировании: как эффективно распределить нагрузку, сохранив высокую производительность и доступность? Можно, конечно, попытаться сделать единственный сервер идеальным и мощным — вертикально масштабировать его. Но в этой статье мы поговорим о горизонтальном масштабировании — будем брать не мощностью сервера, а количеством узлов.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как GitLab с Liquibase миграции в ClickHouse везли

В этом материале автор расскажет, как с помощью Liquibase, GitLab и немного Python настроить прозрачный, безопасный и удобный процесс миграций для ClickHouse кластера.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Как и где учить SQL для начинающих?

В этом видео автор разберет как лучше учить SQL с нуля для анализа данных. Вы узнаете что учить в первую очередь, где это учить, а также рассмотрите профильные курсы и бесплатные материалы, рекомендованные автором.

00:00 Что такое SQL и СУБД
01:32 Чем плох классический подход к изучению SQL
02:20 SQL запросы
02:49 Где учить теорию? (статьи и курсы)
03:23 Что нужно знать для работы аналитиком?
04:22 Функции агрегирования
05:16 SQL Join
07:00 Подзапросы
08:31 Оконные функции
10:42 Отличные сайты для изучения SQL

Смотреть это видео на youtube: youtu.be/AX-w4fr46RM

Читать полностью…

Базы данных | Access, SQL, Big Data

JOIN в SQL

В этом видеоуроке автор подробно и наглядно разбирает запросы данных из нескольких таблиц с использованием оператора JOIN.

00:00 Пример базы данных
01:53 JOIN в SQL
04:06 Псевдонимы таблиц и столбцов в JOIN
05:23 Фильтрация данных
06:59 Сортировка данных
07:32 Итоги

Смотреть это видео на youtube: youtu.be/SYJ1B2KrDCQ

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы SQL: реляционная модель, базовые запросы

В этом видео автор подробно говорит про реляционную модель и язык SQL. Вы узнаете, что такое SQL Server, какие он имеет версии редакции и почему это важно, а также разберете базовые запросы SQL.

Смотреть это видео на youtube: youtu.be/3PXPpU0kncM

Читать полностью…

Базы данных | Access, SQL, Big Data

Debezium в действии: сбор и синхронизация отчётной базы данных

Автор этой статьи занимается разработкой фронтального приложения для сотрудников банка, в котором они смогут в одном окне видеть всю необходимую информацию, хранящуюся в трёх отдельных базах данных. Задача — отобразить пользователю общую выборку данных, которые хранятся физически в отдельных кластерах БД.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Гарантии видимости в распределённых хранилищах

Часто оказывается так, что в процессе упрощения и структурирования на самом видном месте обнаруживаются скелеты древних динозавров, присыпанные мутными формулировками так, что долгие годы их никто не замечает. Если вы хотите окончательно разобраться в уровнях изоляции транзакций и гарантиях порядка операций, то изучите эту статью.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Хеш-индексы в PostgreSQL: быстрый поиск или скрытые проблемы?

Индексы — важнейший инструмент оптимизации запросов в базах данных. В PostgreSQL одним из вариантов является хеш-индекс. В отличие от B-tree, он работает исключительно с операциями равенства (=) и использует бакеты для хранения ссылок на строки таблицы.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

ГДЕ ОДЕВАТЬСЯ МУЖЧИНАМ?

KASUMOV — лидер в сегменте премиальной мужской моды в России. Бренд предлагает эксклюзивные коллекции одежды и обуви и использует материалы высочайшего качества от известных итальянских производителей: Vitale Barberis Canonico, Loro Piana, Reda и Cerruti.

👌🏻
KASUMOV выделяется на фоне ухода мировых брендов и предлагает доступ к роскоши в премиальном сегменте.

На фото функциональная куртка из итальянской шерсти Vitale Barberis Canonico с тинсулейтом и отстегиваемым кроличьим мехом, который обеспечивает комфорт и защиту от холода.

Больше позиций представлено в телеграм-канале бренда по этой ССЫЛКЕ 🔗

Читать полностью…

Базы данных | Access, SQL, Big Data

Как ускорить загрузку данных в хранилище и не писать тонны интеграций?

Если вы аналитик или разработчик, работающий с данными, вам знакома боль:
🔹 API разных сервисов со своими ограничениями и форматами.
🔹 Разные тайминги обновления данных.
🔹 Постоянная поддержка ETL-пайплайнов.
🔹 Логирование ошибок, отваливающиеся коннекторы и хаос в данных.

А что если не писать интеграции вручную и не тратить время на поддержку?

🔥 JetStat — сервис, который берет рутину на себя:
✔️ 60+ источников данных (рекламные кабинеты, маркетплейсы, CRM).
✔️ Автообновление данных в BigQuery, ClickHouse, PostgreSQL и др.
✔️ Простая настройка без кода — подключил и забыл.

📌 Зачем это аналитикам и инженерам?
— Данные всегда актуальны, без лишних задержек.
— Не нужно писать свой ETL и следить за API.
— Можно фокусироваться на анализе, а не на рутине.

👉 Подробнее: JetStat

Реклама. ООО «Джет Лабс». ИНН 7728475027. erid: 2VtzqvWXADm

Читать полностью…

Базы данных | Access, SQL, Big Data

Спрос на системных аналитиков вырос на 117% по сравнению с прошлым годом.

Чтобы стать востребованным айтишником, не нужно иметь высшее техническое образование или уметь программировать. Вы можете освоить все навыки за полгода и выбрать интересную вам сферу. Системные аналитики нужны везде, где есть данные: специалисты служат «мостиками» между разработкой, аналитикой и менеджментом.

Научитесь всему с нуля и с поддержкой личного куратора на программе «Системный аналитик» от Академии Eduson. 80% студентов – новички, программа построена по принципу «от простого к сложному».

За полгода вы:
– с нуля освоите IT-профессию без программирования;
– выполните 6 проектов и бизнес-кейсов в портфолио;
– пройдете более 200 уроков и попрактикуетесь на 30+ заданиях и тренажерах;
– сможете перейти на удаленку и выстраивать комфортный график.

Цель Eduson – ваше трудоустройство. Вы найдёте работу после курса или деньги за обучение вернут, это прописано в договоре.

Оставьте заявку по ссылке и получите второй курс на сумму покупки в подарок.

Читать полностью…

Базы данных | Access, SQL, Big Data

Нужен ли нам сейчас кеш-слой перед СУБД

Уже лет 20 существует миф (или не миф), что современный Highload-проект невозможен без кэшей. Они всегда нас выручали, когда не справлялись базы данных. Но с тех пор, как появились первые кэши, key-value баз данных и другие технологии, многое изменилось и традиционные СУБД значительно эволюционировали. И так ли теперь нужен кэш?

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Практика SQL (часть 2)

Насколько вам нужно знать о том, когда был создан SQL, его нотации, стандарты и куча теоретической базы? Теорию конечно сложно отрицать, так как она показывает насколько глубоко вы знаете язык и ваш технический кругозор, но вот практика начинающим точно нужна.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

Освойте за пару месяцев то, на что другие тратят годы, и обгоните их на карьерной лестнице.

Данные — это новый актив, с которым в 2025-м работают все: от финансистов до маркетологов. Компании ищут специалистов, которые умеют управляться с цифрами, автоматизировать рутину и быстро анализировать данные.

Именно они приносят результаты: так, в 111 000+ вакансий на HeadHunter работодатели указывают Excel как обязательный навык, и благодаря ему вы можете рассчитывать на повышение.

Поэтому Академия Eduson совместно с экспертами из «Сбера», «Лукойла», РЖД, МТС, «Ростелекома» и агентства Your Partner создали курс «Excel и Google-таблицы: от новичка до эксперта». Там вы за 37 интерактивных уроков научитесь выполнять рутинную работу эффективнее — освоите навык, который поднимет вашу ценность как специалиста.

Чему вы научитесь на курсе:
✅ Работать с формулами и функциями — от простых вычислений до сложных расчётов
✅ Создавать понятные таблицы — структурировать данные, настраивать фильтры, форматы и условное форматирование
✅ Использовать сводные таблицы — группировать информацию, находить закономерности, строить прогнозы и отчёты
✅ Работать с графиками и диаграммами — наглядно показывать данные и делать презентации

Что внутри:
🔹 40+ практических заданий — оттачивайте мастерство на тренажёрах в интерфейсе Excel
🔹 Гибкий график — учитесь в удобное время
🔹 Бессрочный доступ — возвращайтесь к материалам в любой момент
🔹 3 месяца поддержки от личного куратора — не бойтесь спрашивать, вам всё объяснят

По окончании курса вы получите верифицированный «Сколково» диплом Eduson, который подтвердит ваши новые компетенции и поможет вам быстрее расти в доходе.

Оставляйте заявку с промокодом EXCEL — получите скидку 65%.

Реклама. ООО "Эдюсон", ИНН 7729779476, erid: 2W5zFG8zfJQ

Читать полностью…

Базы данных | Access, SQL, Big Data

Каждый год говорят, что Python устарел. Но на деле:
🔹 Google, YouTube, Netflix используют Python в своих сервисах
🔹 Разработчики в Data Science и AI активно применяют Python
🔹 Кибербезопасность – многие инструменты для пентеста создаются именно на Python

Если вы интересуетесь разработкой или хотите освоить новый язык программирования, обратите внимание на бесплатный мини-курс по Python от Skillbox. Он поможет разобраться в базовых навыках и научит применять их на практике.

Подробности и регистрация: https://epic.st/GY1-M?erid=2Vtzqvy6Esx

Реклама. ЧОУ ДПО «Образовательные технологии «Скилбокс (Коробка навыков)», ИНН: 9704088880

Читать полностью…

Базы данных | Access, SQL, Big Data

Хотите научиться автоматизировать процессы обработки данных как в Бигтехе?

Чтобы проанализировать большой массив данных, его нужно обработать. Обычно это происходит в три этапа: извлечение, трансформация и загрузка (или ETL). Но чем больше становится данных, тем труднее управлять этим процессом вручную — автоматизировать его можно с помощью Airflow.

Чтобы научиться работать с Airflow, приходите на бесплатный вебинар, где Антон Шишков, опытный Software Engineer из бигтех-компании, — поделится с вами своими знаниями и лучшими практиками работы с Airflow на примере автоматизации сбора данных.

Что мы будем делать на вебинаре:
🟠 Познакомимся с Airflow: узнаем, как он может упростить работу и повысить эффективность;
🟠 Узнаем об операторах и сенсорах: как использовать для создания гибких и надежных конвейеров данных;
🟠 Напишем базовые и продвинутые DAG'и, чтобы вы могли применить их на практике;
🟠 Разберем, как использовать Docker, FastAPI, Postgres, Clickhouse и Minio для автоматизации ETL-процессов.

🕗Встречаемся 4 марта в 19:30 по мск

Зарегистрироваться на бесплатный вебинар

Читать полностью…

Базы данных | Access, SQL, Big Data

Как протестировать производительность СУБД перед миграцией

После ухода западных вендоров в 2022 году российские компании столкнулись с необходимостью массовой миграции с Oracle и MS SQL на PostgreSQL и другие открытые СУБД. Теперь к вопросам миграции приходится относиться ответственнее: самостоятельно оценивать риски и прогнозировать работу систем после переезда.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

#вакансия #job #vacancy #remote #parttime #руководитель #educator #databases #security

Компания: OTUS – EdTech платформа.

Вакансия: Руководитель онлайн-курса «Безопасность баз данных».

Вакансия предполагает дополнительную частичную занятость. Требуется практический опыт по тематике курса. Можно без опыта преподавания. Мы с удовольствием поможем Вам освоить Best Practices преподавания: для этого у нас есть вводный курс по преподаванию и пробные уроки с методистом.

Руководитель - это эксперт, который играет ключевую роль на курсе - разрабатывает программу курса, ведёт часть занятий, работает в команде с преподавателями, методистом и продюсером курса.

Условия:
✅ удаленное сотрудничество, занятость part-time.
✅ темы по программе курса и комфортную нагрузку можно выбирать.
✅ ставка за проведение одного занятия (полтора часа) от 3000 до 5000 руб., плюс отдельно оплачивается разработка программы, разработка материалов к занятиям, проведение открытых уроков и другие активности.
✅ уроки проводятся в онлайн формате на mts-link ru.
✅ на занятиях используется презентация с теорией и практические примеры, чтобы раскрыть тему урока.
✅ наши методисты помогают освоить лучшие инструменты и практики преподавания.

Еще Вы сможете:
✅ внести свой вклад в развитие IT.
✅ структурировать свой опыт и знания.
✅ развивать личный бренд.
✅ прокачать софт-скиллы.

Бонусы:
✅ наши курсы со скидкой/бесплатно.
✅ воркшопы и конференции для наших руководителей и преподавателей.

Подробнее в telegram: @ElenaAlias

Читать полностью…

Базы данных | Access, SQL, Big Data

Зачем запускать облачную СУБД на выделенном сервере

Когда речь заходит о выборе инфраструктуры, возникает классический вопрос: использовать готовый сервис в облаке или собрать свой на выделенных серверах. На первый взгляд, все просто: облако — это про скорость и удобство, а выделенные серверы — про мощность и производительность. Но все не так просто.

Базы данных

Читать полностью…

Базы данных | Access, SQL, Big Data

📍Геоданные и временные ряды в Spark: хаос или порядок?

GPS-координаты, карты, временные метки — данные есть, но как с ними работать? Стандартные методы тормозят, запросы громоздкие, аналитика требует вечности.

💡Есть решение. На открытом вебинаре «Обработка геопространственных и временных данных на Spark» 11 марта в 20:00 (мск):

- Разберём пространственные данные: координаты, маршруты, карты
- Научимся анализировать временные ряды с трендами и предсказаниями
- Проанализируем реальные кейсы: GPS-данные, сенсоры IoT, анализ движения

📢 Спикер Вадим Заигрин — опытный разработчик, Data Engineer и Data Scientist. Team Lead команд инженеров данных на разных проектах.

Все участники получат скидку на большое обучение «Spark Developer».

➡️ Регистрируйтесь, чтобы не пропустить: https://vk.cc/cIWj68

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Читать полностью…

Базы данных | Access, SQL, Big Data

Основы аналитики: как с помощью SQL, Python и статистики принимать обоснованные решения

Центр непрерывного образования ФКН НИУ ВШЭ приглашает присоединиться к бесплатному вебинару, который подойдет всем, кто только начинает знакомство с классическими аналитическими инструментами.

Вебинар состоит из двух частей:
〰️〰️〰️〰️
- Теория: разберетесь в основах SQL, Python и статистического анализа.
- Практика: примените полученные знания, решив прикладную задачу. Вместе с преподавателем отфильтруете данные, сформируете из них выборки, построите визуализации и на основе статистики сможете принять решение о нововведениях для разработчиков онлайн-игры.

Спикер: Маргарита Бурова, академический руководитель программы «Аналитик данных».
Дата: 26 февраля, 19:00.

Регистрация

Реклама: НИУ ВШЭ
ИНН:
7714030726
Erid:
2SDnjdUEJ7E

Читать полностью…

Базы данных | Access, SQL, Big Data

На GitVerse стала доступна среда разработки GigaIDE Cloud со встроенным AI-ассистентом

СберТех представил российскую облачную среду для разработки GigaIDE Cloud, встроенную в платформу для работы с исходным кодом GitVerse.

Среда обеспечивает редактирование, отладку, проверку и совместную работу с кодом, а также постоянный и безопасный доступ к предварительно настроенным рабочим пространствам разработки. GigaIDE Cloud доступна из браузера и позволяет вести разработку в удобном режиме с различных устройств вне зависимости от их производительности.

Также пользователи получили доступ к обновлённой версии интегрированной среды разработки GigaIDE Desktop, которую можно скачать на GitVerse. Десктопная версия стала стабильнее и производительнее, а еще добавились новые инструменты для анализа и навигации по элементам крупнейших фреймворков для Java.

В обе версии среды разработки интегрирован AI-ассистент разработчика GigaCode, который автоматизирует рутинные процессы и помогает программистам в реальном времени.

Начать пользоваться GigaIDE Cloud — по ссылке

Читать полностью…

Базы данных | Access, SQL, Big Data

Соревнование Data Fusion Contest 2025: покажи, что умеешь!

Стартует долгожданное соревнование в мире Data Science — Data Fusion Contest 2025! Общий призовой фонд — 3 000 000 рублей 🔥

Что тебя ждёт?

🚀 2 основные и одна образовательная задачи: «Label Craft» — про предсказание категории товаров, «4 Cast» — про предсказание динамики платежей на последующие 12 недель, и «Distribution».

🚀 Специальная номинация Companion за лучшие публичные решения, в которой победителей выбирает жюри на основе мнений других участников.

⏰ Даты проведения соревнования: с 13 февраля по 7 апреля 2025 года.

❗️ Формат — онлайн: участвовать можно из любой точки мира.

Церемония награждения пройдет в Москве на конференции DATA FUSION 2025.

Почему нужно участвовать? Три основных причины — это:

🛑 возможность прокачать скилы на практике и погрузиться в новые DS/ML-методы,
🛑 шанс сразиться с профессионалами отрасли,
🛑 твоё желание получить внушительный денежный приз.

Организаторы — ИТ-холдинг Т1 и ВТБ.

Хочешь попасть в число лучших? Регистрируйся по ссылке прямо сейчас!

Реклама. ООО "Т1". ИНН 7720484492. erid: 2W5zFJHUFrQ

Читать полностью…
Subscribe to a channel