devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​😎Apache Flink. Как работает дедупликация данных в потоке Kafka-to-Kafka?

В этой статье решим реальную бизнес-задачу дедупликации данных в пайплайне Kafka-to-Kafka.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Думаете, что все знаете и вас ничем не удивить? Проверьте это на практике.

Школа IT-профессий Skillfactory приглашает на бесплатный онлайн-интенсив «Погружение в Data Science: обучите свою первую нейросеть за два дня».

Чем отличается машинное обучение от глубокого обучения?
Что такое «базовый синтаксис Python для анализа данных»?
Как создать и обучить собственную нейронную сеть?

Ответы на эти и другие вопросы узнаете на вебинарах 16 и 17 января. А за лучшее решение домашнего задания сможете получить мини-курс по аналитическому мышлению в подарок.

Зарегистрироваться бесплатно: https://go.skillfactory.ru/&erid=2VtzquppcNh

Реклама, ООО «Скилфэктори», ИНН: 9702009530

Читать полностью…

Data Science | Machinelearning [ru]

​​😵‍💫Вливаемся в Data Science: подробный roadmap что и где изучать

В этой статье рассмотрим план становления начинающим дата-сайнтистом.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👍Как я извлекал иерархию статей Википедии для задач NLP

В этом руководстве я покажу, как на основе Википедии можно сделать текстовый датасет, метки которого будут иметь иерархию.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🏊‍♂Ныряем со Сноркелем в море данных. Туториал по фреймворку для программирования датасетов

В этой статье хочу рассказать вам о Сноркеле - фреймворке для программирования данных (data programming).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🐧Edge AI чипы от Kneron. Ныряем в прошивку

В этой статье я расскажу о прошивке чипов, из чего она состоит, как собирается, как вообще устроен софт такой навороченной многоядерной системы на кристалле, как KL520.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​⭐️Автоматическое исправление ошибок ASR с помощью sequence-to-sequence моделей

В этой статье представлены несколько разных и интересных способов корректировки ошибок ASR-моделей.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👉Bag of tricks для разметки текстовых данных: Часть 2. Удаление дубликатов

В этой статье я расскажу об ещё одном способе собирать данные более качественно и экономить на разметке — фильтрации похожих друг на друга текстов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😈LLMClone: как клонировать себя в Telegram

В статье рассматривается простая идея, состоящая в том, чтобы зафайнтюнить языковую модель на личных сообщениях, выгруженных из Telegram-чатов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🦾Сильный ИИ. Элира1. Увеличение памяти ChatGPT

В этой статье я расскажу о том, как можно увеличить размер запроса к ChatGPT до почти полутора миллионов символов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👨‍💻Как с помощью ChatGPT писать SQL-запросы. Несколько кейсов

В статье расскажу о том, как ChatGPT может сэкономить время и усилия начинающего специалиста по SQL.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠MiVOLO: новая State-of-the-Art нейросеть с открытым исходным кодом для определения пола и возраста по фотографии

В этой статье хочу рассказать вам нашу историю о том, как изначально рутинная рабочая задача закончилась созданием открытой state-of-the-art нейросети, научной работой и новым датасетом.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🐘Функции и хранимые процедуры в SQL: зачем нужны и как применять в реальных примерах

В этой статье вы узнаете, как устроены функции и хранимые процедуры и как их применять для повторного использования запросов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠«Возрождение» больших данных, оптимизация инференса LLM и новинки от AMD

В этой статье вы узнаете, какие Ops-практики входят в систему MLOps, как выбрать СУБД для анализа данных и как построить платформу для DS/ML-разработчиков.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👍Тонкая настройка Whisper для многоязычного ASR с помощью Hugging Face Transformers

В этой статье мы рассмотрим пошаговое руководство по дообучению Whisper для многоязычного ASR с использованием Datasets, Transformers и Hugging Face Hub.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👨‍🔬Edge AI чипы от Kneron. Собираем оригинальный девайс

В этой статье я расскажу, как создать на базе KL520 собственный оригинальный девайс.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤠NumPy: оттачивайте навыки Data Science на практике

В этой статье мы рассмотрим ряд различных упражнений, используя библиотеку NumPy.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤔I never asked for this. Как понять, на что способен аугментатор текстов

В этой статье я расскажу о способе понять, на что способен ваш аугментатор текста и в каких случаях его лучше использовать.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Как разработчику игр выйти на пассивный доход и уволиться с нелюбимой работы?

Разрабатывать игры — это сложно.

Но можно выйти на стабильный доход, уделяя разработке игр время только по вечерам.

💸 Один такой разработчик расскажет план действий, который привел его к заработку в более $5 000 ежемесячно.

Все это будет происходить на бесплатном Gamedev Интенсиве 6.0

За участие ты получишь крутые бонусы включая ассеты для игр и полезные гайды.

Записаться можно тут — @intensive_gamedev_bot

Каждый день количество доступных бонусов уменьшается.

🤫 Самые крутые бонусы можно получить только если записаться заранее — @intensive_gamedev_bot

Читать полностью…

Data Science | Machinelearning [ru]

Всем привет! На связи Валерия Басова, Системный аналитик, группа разработки машинного обучения Embedika, хочу поделиться своей подборкой полезных книг для разработчиков, исследователей и просто интересующихся.

Дисклеймер: считаю важным обращаться к фундаменталистам, которые не просто дают проблему и решение, а объясняют философию.

Читать полностью…

Data Science | Machinelearning [ru]

​​🌚Edge AI чипы от Kneron. Что это такое и как оно работает

В этой статье я расскажу об опыте погружения в технологию Edge AI, про то, как устроен чип с нейроускорителем, а также про то, с какими трудностями пришлось столкнуться, чтоб заставить все это работать.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Приходите подтягивать математику для собеседований на аналитика и специалиста по DS.

На курсе Практикума — упор на практику:
◾️симулятор собеседований,
◾️больше 1000 практических задач,
◾️разбор теории на бизнес-кейсах.
А ещё — учебник для людей, где мы объясняем сложное простым языком.

→ Начните с бесплатного вводного урока

Читать полностью…

Data Science | Machinelearning [ru]

​​👍Bag of tricks для разметки текстовых данных: Часть 1. Четыре способа размечать меньше

В этой статье я расскажу о том, зачем вообще разработчику машинного обучения разбираться в аннотации данных, сложностях и подводных камнях, сопровождающих процесс, и о способах сократить количество ручной разметки в проекте.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👥Как мы создавали сервис для хостинга ML-моделей на базе Kubernetes и AIOHTTP: опыт Контура

В этой стать расскажу, как наша команда справляется с сервингом сотни моделей и какие решения мы для этого разработали.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😻Вестник Midjourney: новая документация, генерация фрагментов и тюнер стилей

В этой статье рассказываю о нововведениях и различиях между релиз- и альфа-версией.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😉Вредные советы по подготовке датасета

В этой статье автор поделиться вредными советами по подготовке датасета для сервисов видеоаналитики.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💪Выборочное удаление столбцов для повышения эффективности хранения в озерах данных

В данной статье мы расскажем, как сократить размер данных в рамках формата Apache Parquet за счет удаления не использующихся колонок большого размера.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🐬Python + MySQL: как подключиться к СУБД MySQL и работать с ней с помощью Python

Из этой статьи вы узнаете, как подключиться к MySQL с помощью Python и выполнить основные команды для работы с данными в таблице: установка необходимых библиотек, подключение к базе данных, создание и удаление таблицы, добавление, извлечение и удаление данных из таблицы.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤔ML SAST. Часть 1: как работают инструменты SAST и какие проблемы может решить применение машинного обучения?

В этой статье мы рассмотрим основные принципы и методики, применяемые в инструментах статического анализа безопасности, обозначим существующие проблемы и рассмотрим потенциал внедрения машинного обучения.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧑‍💻Как систематизировать работу с входящими документами в компании с помощью OCR-инструментов. Часть 1

В этой статье мы расскажем, какие задачи решали на этом проекте, рассмотрим предложения со схожим функционалом, существующие на рынке, и покажем архитектуру предобученного классификатора документооборота.

Читать...

Читать полностью…
Subscribe to a channel