devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​💪Как мы запустили сервис вопросов и ответов, получили много хейта, а потом внедрили ML и ускорили процессы в разы

В этой статье я поделюсь с вами историей о том, как мы размечали данные, искали баланс между порогом вероятности и охватом вопросов, обучали и дообучали модель, а также расскажу об итогах нашей работы.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Генеративная «уловка-22», или Почему ИИ плохо отличает сгенерированные тексты от написанных человеком

В этой статье мы разберём, почему инструменты определения сгенерированных текстов так неточны и можно ли с этим что-нибудь сделать.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Модельный риск: как увеличить эффективность работы ML моделей в большой компании

В этой статье расскажем о том, как можно сделать машинное обучение в компании более эффективным, какие бывают риски у ML моделей и как на них реагировать, а также делимся своим опытом, как мы построили систему по модельному риску в X5 Tech – компании с сотнями ML моделей в production.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾ChatGPT плохо отвечает на «простые вопросы». Как это починить?

В этой статье я расскажу о нашей последней работе — Multilingual Triple Match — системе для поиска ответов на фактологические вопросы, которая по своей точности обходит даже ChatGPT.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Хотите разобраться в языковых моделях? Учитесь у профессионалов и получайте знания из первых рук — на интенсиве GPT Week Школы анализа данных Яндекса!  

Эксперты ШАДа, разрабатывающие YandexGPT, подготовили насыщенную 5-дневную программу. Вы узнаете, как запустить генеративную модель на ограниченных ресурсах, какие вызовы есть в сборе гигантских датасетов и в чём особенности предобучения и alignment. Каждый участник сможет задать вопросы спикерам, а также познакомиться с устройством YandexGPT — от деталей создания до сложных инженерных аспектов. 

Что ещё нужно знать? Интенсив пройдёт онлайн с 27 ноября по 1 декабря. Участие бесплатное, но потребуется регистрация. Записаться и посмотреть программу можно на сайте.

Реклама. ООО «Яндекс», ИНН 7736207543.

Читать полностью…

Data Science | Machinelearning [ru]

​​Trino: как перехать с Vertica, и как устроен его оптимизатор запросов?

Расскажут эксперты компаний Avito и CedrusData на онлайн-митапе при поддержке JUG Ru Group.

🗓 24 ноября в 18:00 (МСК, GMT+3)

В программе:
✔ Дмитрий Рейман — «Как пересесть на Trino после Vertica»
Реальный кейс Авито по переводу аналитической платформы с Vertica на Trino с сохранением UX конечных пользователей. 

✔ Владимир Озеров — «Архитектура и проблемы оптимизатора Trino»
Посмотрим, какие особенности архитектуры позволяют Trino быть эффективным. Где он неэффективен и какие улучшения возможны.

➡️ Регистрация на Timepad.

Ссылку на трансляцию отправят вам за 1 час до начала митапа.

Реклама. ООО "КВЕРИФАЙ ЛАБС"

Читать полностью…

Data Science | Machinelearning [ru]

​​Дроны — это современные патрульные, охранники, исследователи и помощники во всех сферах. 

Специалисты не только умеют управлять дроном, но и разбираются в его устройстве и могут обрабатывать данные с сенсоров. Эти навыки можно получить на онлайн-курсе Skillbox «Пилот дронов». 

За 5 месяцев на практических занятиях вы научитесь:

Правильно выбирать дрон, разбираться в его конструкции и особенностях обращения с устройством
Управлять беспилотником — сначала в авиасимуляторе, а потом в помещении и на открытом пространстве
Снимать данные с сенсоров и обрабатывать 

Также вы сможете пройти стажировку в ГК «Геоскан». 
Подробнее по ссылке: https://epic.st/nyQbb

🎁В ЧЕРНУЮ ПЯТНИЦУ на курс действует скидка до 60% и при покупке вы получаете ВТОРОЙ КУРС в подарок

Реклама. ЧОУ ДПО «Образовательные технологии «Скилбокс (Коробка навыков)», ИНН: 9704088880

Читать полностью…

Data Science | Machinelearning [ru]

​​👍5 уровней зрелости MLOps

В этой статье мы рассмотрим пять уровней зрелости MLOps, основанных на лучших практиках Google и Microsoft, обсудим эволюцию от ручного развёртывания до автоматизированных инфраструктур, подчеркнув преимущества, которые приносит каждый уровень.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤Персонализация тарифного плана для новых абонентов: как оцифровать привлекательность

В этой статье поговорим о том, как с помощью ML определить оптимальные параметры тарифа для абонентов с короткой историей, и как посчитать привлекательность полученного тарифа.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Просто взяли нейросетку Stable Diffusion и превратили голливудских звёзд в советских пионеров!

Хотите также? Вот тут ребята проводят интенсив, на котором собирают свои нейросетки при помощи ChatGPT и Stable Diffusion.

На интенсиве вы узнаете, как работают технологии вроде ChatGPT, Stable Diffusion, а также разберетесь в генерации и распознавании речи с помощью нейронок — этот интенсив для тех, кто хочет быстро залететь в востребованную сферу в ИТ!

Всего за 2 дня вы создадите сразу 12 крутых нейросетей.

Зарегистрироваться на интенсив можно по ссылке.

 Реклама. ООО "ТЕРРА ЭЙАЙ". ИНН 9728019395. erid: LjN8K4Jef

Читать полностью…

Data Science | Machinelearning [ru]

​​👨Использование Insightface для быстрого поиска и сравнения лиц на изображениях

В этой статье я рассмотрю кейс поиска «близнецов» в паспортных данных, которые были размещены в pdf‑файлах, насчитывающих десятки, а порой и сотни страниц.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😎Введение в архитектуру MLOps

В этой статье автор расскажет как ускорить разработку и внедрение новых моделей, а также обеспечить их надежную и эффективную работу на всех этапах жизненного цикла.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📊Обработка результатов статистических наблюдений с помощью толерантных интервалов

В этой статье хочу поделиться личным опытом использования толерантных интервалов для обработки результатов статистических наблюдений, привести некоторые примеры и дать краткое описание процедуры расчета с реализацией на языке Python.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🗣Русский LLM-помощник (saiga) с кэшем, используя RAG (Retrieval-Augmented Generation)

В этой статье, используя технику Retrieval-Augmented Generation ("Поисковая расширенная генерация"), мы настроим русскоязычного бота, который будет отвечать на вопросы потенциальных работников для выдуманного свечного завода.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Компромисс смещения и дисперсии в машинном обучении

В этой статье мы рассмотрим такое понятие в машинном обучении, как компромисс смещения и дисперсии (bias-variance Tradeoff).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀ClickHouse: Передовой инструмент для оперативной обработки данных

В данной статье мы подробно рассмотрим что представляет собой разработка ClickHouse, а также как организации используют ее для хранения и обработки данных.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Всё о Machine Learning на YaTalks 2023: доклады топовых экспертов

Ждём вас на конференции YaTalks 2023 — крупнейшем мероприятии Яндекса для IT-сообщества. Более 100 экспертов индустрии соберутся, чтобы поделиться кейсами и идеями, которыми можно вдохновиться. Выступления будут 5 и 6 декабря: офлайн — в Москве и Белграде, онлайн — в любой точке мира.

Вот что обсудим в первый день в треке Machine Learning ↓

«Ускоритель в масштабе планеты: как инженеры управляют временем» — доклад о технологиях, которые увеличили скорость целых городов и стран, и о том, что происходит уже сейчас и ждёт нас в будущем.
Алексей Гусаков, технический директор, Яндекс Поиск

«Практические аспекты обучения диффузионных моделей на примере YandexART» — про процесс обучения генеративных картиночных диффузионных моделей от а до я.
Сергей Овчаренко, руководитель группы нейросетевых технологий компьютерного зрения, Яндекс Поиск

«Сильный ИИ — миф или уже реальность?» — что сейчас умеют LLM, с чем ещё, кроме текстов, умеют работать и как они могут помочь в создании сверхсильной интеллектуальной машины.
Андрей Кузнецов, руководитель научной группы FusionBrain, AIRI

Вас ждут не только доклады, но и нетворкинг, лайвкодинг, Random Coffee с коллегами, карьерные консультации и живые встречи с топовыми экспертами. Регистрируйтесь по ссылке на один из дней и приходите ↓

Зарегистрироваться

Реклама.
ООО "Яндекс". erid: 2VtzqxJFN5W

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐Обучение с подкреплением: 10 вариантов применения

В этой статье мы с вами рассмотрим некоторые из реальных применений обучения с подкреплением.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠OpenAI GPTs: пошаговое руководство для создания с практическими примерами, ACTIONS и внешние API

В этой статье я расскажу как создавать кастомные GPTs под конкретные задачи и приведу примеры практических реализаций.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Как оптимизировать процесс привлечения клиентов B2B с помощью методов Продвинутой Аналитики

В этой статье мы поделимся примером первого практического применения Продвинутой Аналитики в процессах стратегического бизнес-планирования численности ресурсов Сети для привлечения клиентов Юридических Лиц.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧑‍💻Хакатоним эффективнее: как поднять удаленный сервер MLflow Tracking для команды

В этой статье я расскажу о том, как реализовать удаленный сервер MLflow Tracking, даже если у читателя нет опыта взаимодействия с удаленными виртуальными машинами (ВМ).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🖼Практический пример использования модели детекции изображений

В данной статье автор рассмотрит, как пользоваться моделями детекции изображений на практике.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Вкатываемся в Machine Learning с нуля за ноль рублей: что, где, в какой последовательности изучить

Всем доброго времени суток. Я давно обещала выложить сюда подробный гайд на тему того, как можно изучать Machine Learning самостоятельно, не тратя деньги на платные курсы, и, наконец, выполняю свое обещание. Надеюсь, этот гайд станет подсказкой, которая поможет найти правильное направление новичкам, которые хотят погрузиться в нашу область.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😶‍🌫️Как расширить компетенции аналитиков при работе с Big Data

В данной статье мы решили рассмотреть вопрос повышения эффективности работы единого хранилища данных компании.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😵Обзор современных подходов персонализации диффузионных нейронных сетей

В данной статье я расскажу о современных подходах к персонализации text-to-image моделей на базе открытой архитектуры Stable Diffision, а также делюсь техническими подробностями каждого подхода и анализирую их применимость в реальных высоконагруженных системах.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Добавляем DALL-E 3 в свой ChatGPT бот в Telegram

В этом туториале мы добавим генерацию изображений с помощью DALL-E 3 в наш Telegram чат-бот.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📷(Более) точное измерение динамического диапазона сенсора камеры

В этой статье поговорим о том, как (более) точно измерять динамический диапазон сенсора камеры и что с этими замерами можно сделать.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🎮Одним из самых увлекательных направлений, в котором широко используется обучение с подкреплением, является киберспорт.

🔥В программе курса Reinforcement Learning в OTUS подробно разбираются одни из самых интересных кейсов применения RL в игровой индустрии.

21.11 в 20.00 мск. приглашаем на открытый урок “Игры c человеком и компьютером” 

📌На занятии:

- узнаем историю противостояния человека и компьютера в настольных и компьютерных играх;

- познакомимся с основными идеями и подходами при создании игровых интеллектуальных агентов с помощью обучения с подкреплением; 

- покажем как обучить модель эффективно управлять группой юнитов в одной из популярных игр.

После урока вы будете понимать как разрабатываются интеллектуальные агенты для различных игр и какие шаги необходимо пройти для реализации собственного игрового бота.

👉Регистрация 

При поступлении в группу возможны разные способы оплаты и рассрочка платежа. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: LjN8KHTdL

Читать полностью…

Data Science | Machinelearning [ru]

​​😵Проблема множественного тестирования на практике

В этой статье я расскажу, о проблеме множественного тестирования, методах решения проблемы, и о практическом опыте работы с множественными экспериментами.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🐿Введение в Apache Flink: осваиваем фреймворк на реальных примерах

В этой статье рассмотрим пайплайн Kafka‑to‑Kafka, задачу дедупликации событий, использование таймеров и другие примеры.

Читать...

Читать полностью…
Subscribe to a channel