devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​📒RecTools – OpenSource библиотека для рекомендательных систем

В этой статье я расскажу про библиотеку RecTools, которая собрала в себе все самые необходимые модели, метрики и инструменты для построения рекомендательных систем.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👁Машинное зрение для контроля горнодобывающей техники

В этой статье я расскажу, как с помощью нейронки можно считать циклы погрузки на фронтальных погрузчиках.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Erid: LatgByTWK
На ротационной программе Excellence продлили регистрацию для инженеров до 12 ноября

Excellence — ротационная программа развития в международной FMCG-компании JTI. В рамках трека «Системный инженер» тебя ждут 3 ротации в разных командах JTI — от 5 до 12 месяцев в каждой. За это время ты погрузишься в ключевые процессы автоматизации производства на одной из крупнейших фабрик в структуре JTI и обретёшь необходимые знания для дальнейшей роли.

Узнать больше на сайте программы

Для кого эта программа?
Для тех, у кого уже есть опыт работы с АСУ ТП или в смежных областях.
Для тех, кто владеет английским на уровне Intermediate и выше.

Мы предлагаем:
— Стартовая зарплата от 165 000 руб. гросс
— ДМС с расширенной стоматологией и страхование жизни;
— Помощь с переездом в Санкт-Петербург для участников из других городов.

Успей подать заявку на участие в отборе до 12 ноября.

Реклама. ООО «Дж.Т.И. Россия».ИНН 7703386329

Читать полностью…

Data Science | Machinelearning [ru]

​​👥Подбираем параметры сессии в Apache Spark, чтобы не стоять в очереди

В этой статье мы поговорим о том, как правильно подобрать необходимое количество параметров и не положить кластер на коленочки.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Легко ли девушкам строить карьеру в ИТ?

Разбираемся в новом выпуске «Техно.Логично» – подкаста Газпромбанка об ИТ и технологиях! Его героинями стали ИТ-лидер розничного стрима Инвестиции Елизавета Кондрашова и руководитель команды разработки экосистемы «Газпромбанк Бизнес-Онлайн» Дарья Корчуганова.

Даша и Лиза обсудили:
🔹Насколько важны гендерные различия в ИТ-профессиях
🔹Как относятся к феминитивам девушки в Газпромбанке
🔹Сталкиваются ли женщины в ИТ с «липким полом» и «стеклянным потолком»
🔹Почему девушки не всегда любят танцы и фортепиано
🔹Как избежать неумышленной гендерной дискриминации

Послушать и посмотреть:
🔗YouTube
🔗Apple Podcasts
🔗Яндекс Музыка
🔗Google Podcasts

Бонус – конкурс в конце выпуска! Наверняка среди ваших знакомых много женщин, которые благодаря своему таланту и упорству добились карьерного успеха. Напишите в комментариях на YouTube вдохновляющую историю об одной из них: можно про ИТ, а можно и про другие сферы. Автор самого интересного ответа получит приз – беспроводные наушники Apple AirPods!

Реклама Банк ГПБ (АО), ИНН: 7744001497

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Градиентный бустинг: как подобрать гиперпараметры модели в 5 раз быстрее, чем обычно?

В этой статье я расскажу, как используя недокументированные возможности фреймворка Apache Spark, качественно подобрать гиперпараметры для модели градиентного бустинга всего за один человеко-день вместо обычных пяти.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Обучение с подкреплением - метод машинного обучения, который сегодня находит широкое применение в разных областях: автоматизация на производстве, здравоохранение, робототехника и других. Особое место в этом списке занимает сфера трейдинга и финансов. 

🔥В OTUS стартует курс “Reinforcement Learning”, на котором специалисты смогут освоить RL-алгоритмы на практике и использовать их, в том числе, с целью управления финансовым портфелем.

8.11 в 20.00 приглашаем на урок «Применение обучения с подкреплением на финансовых рынках».

📌Вы узнаете:

- как применить обучение с подкреплением для анализа рынка

- как создать модель рынка для обучения торгового агента

- что нужно для построения полноценного торгового робота

- какие алгоритмы помогают в прогнозировании поведения финансового рынка

👉 Регистрация https://clck.ru/36SWxr

При поступлении в группу возможны разные способы оплаты и рассрочка платежа.                                       
Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: LjN8KYyWQ

Читать полностью…

Data Science | Machinelearning [ru]

Аналитикам данных и специалистам по DS без математики никуда — она нужна на собеседованиях и в рабочих задачах. 

Чтобы наладить отношения с тервером, матаном и линалом, приходите на курс Яндекс Практикума.
— учебник для людей: не фундаментальный, но и не научпоп;
— интерактивные задания;
— практика на бизнес-кейсах;
— преподаватели в чате, которые объяснят непонятное;
— примеры задач из собеседований.

→ Начните курс с бесплатной вводной части, она поможет понять, подходит ли вам программа. А если решите продолжать учиться — до 30 ноября действует скидка 20% к Чёрной пятнице.

Читать полностью…

Data Science | Machinelearning [ru]

​​👁Сокращаем дистанцию: как сконструировать SQL-модели в MLflow и упростить управление жизненным циклом машинного обучения

В этой статье мы разберемся в фундаментальных принципах использования на платформе простой SQL-модели и, во-вторых, решить сложную задачу — как сохранить SQL запросы (SQL-модели), используя репозиторий моделей MLflow.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤔Жук, нумерология, хеш или ничо? Оптимизация работы с путями

В этой статье я поделюсь с своим опытом оптимизации задачи по редактированию и поддержке в актуальном состоянии огромного количества данных типа «куда направить товар».

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😶‍🌫️Рисуем с нейросетями: тонкие корректировки в Midjourney и Lumenor.ai

В данной статье мы рассмотрим два ресурса, которые доступны онлайн и на сегодняшний день лучше всего справляются с задачей визуализации “по брифу от человека” – Midjourney и Lumenor.ai.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔮Когда одной ARIMA мало. Прогнозирование временных рядов нейросетями

В этой статье я хочу поговорить про временные ряды, а если конкретнее, про использование нейросетей для их прогнозирования.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😈Поймай меня, если сможешь: как найти хакера в инфраструктуре с помощью ML

В этой статье мы разберем действия red team, и расскажем, как модели машинного обучения могли бы помочь их поймать, и покажем, какими методами можно обнаружить атаку и выявить ее источник.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💪Как мы определили веса алгоритмов ранжирования крупнейших маркетплейсов на открытых данных

В этой статье расскажу, как мы прошли этот путь и проверили, что решение действительно работает.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🛠MLOps-инструменты, обзоры рынка и тренды потоковой обработки данных

В этой статье я рассмотрю материалы, которые помогут вам лучше разобраться в темах ML, искусственного интеллекта и дата-аналитики.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👨‍🔬Дежурный data-инженер: рабочие хроники

В этой статье я расскажу о том, как data-инженер принимает вызовы технической команды по работе с платформой данных.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Общаемся с базой знаний: как мы улучшили точность генеративных ответов LLM с помощью собственного RAG

В этой статье мы покажем работающие кейсы и синергию подходов, реализованных нами в рамках разработки агента вопросно ответной системы - FractalGPT QA агента.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚦 Как создавались новые Яндекс Карты высокой детализации и откуда для этого брались данные
 
В этом выпуске подкаста Yet Another Podcast технический директор и продакт-менеджер сервиса рассказывают, что такое HD-карты, зачем на дороги нанесли разметку и добавили объемные здания, как создается «Народная карта» и что ждет карты в будущем, а также поделились фишками, которые есть в Картах.
 
Смотреть тут…

Читать полностью…

Data Science | Machinelearning [ru]

erid:2Vtzqws6oR9
Реклама Банк ГПБ (АО), ИНН: 7744001497

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Переизобретаем сжатие в распределенной базе данных

В этой статье расскажу, как мы изменили подход к сжатию данных, чем пришлось пожертвовать и почему менее эффективное «на бумаге» решение в результате превзошло наши ожидания.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤Обзор Llemma: новая математическая open-source модель

В этой статье я расскажу про обучение модели, новый датасет Proof-Pile-2 и в конце сравню ее с ChatGPT и GPT-4 на ЕГЭ заданиях по профильной математике.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔍Анализ номинативных данных

В этой статье мы разберем подробнее понятие номинативных данных и их анализ.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👽От Style Transfer до диффузии: эволюция визуальных эффектов на смартфонах

В этой статье я разберу эволюцию видеоэффектов, поделюсь наблюдениями и раскрою пару инсайдов о том, как перенести стилизацию изображения из StableDiffusion на смартфоны.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🔮Предсказываем цены с помощью методов анализа данных и машинного обучения

В этой статье мы поговорим с вами о задаче, связанной с разработкой комплексной модели для прогнозирования цен на электроэнергию, которая позволяет обеспечить стабильность и надежность работы энергосистемы.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💀Как страшненький лендинг Midjourney втрое повысил конверсию, а банальные тексты Chat GPT оказались вдвое кликабельнее

В этой статье мы расскажем, как работаем с нейросетями в контекстной рекламе, и каких результатов добиваемся.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Как я ускорила разработку корпоративных онлайн-курсов с помощью современной модели 4С/ID и использования нейросетей

В этой статье я расскажу, на каких этапах проектирования нейросети могут быть полезны, какие возникли трудности и каких результатов мы добились.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐Как экспертиза в области мониторинга событий ИБ помогает создавать качественные продукты. Часть 2

В этой статье я расскажу о том, как механизм построения цепочек запускаемых процессов в MaxPatrol SIEM помогает выявлять атакующих в сети.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​😎Как экспертиза в мониторинге событий ИБ помогает создавать качественные продукты

В этой статье мы раскроем секреты attack detection в привязке к SIEM-решениям (системам мониторинга событий ИБ и выявления инцидентов, security information and event management).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Оптимизируй и управляй: как работать с большими данными в облаке?
 
📅 Онлайн-митап | 9 ноября в 11:00 msk

Как сделать большие данные эффективным инструментом для бизнеса, какова роль облачной платформы и ELT-фреймворков, как обеспечить надежное хранение и обработку данных — узнаете на онлайн-митапе. 

В обсуждении примут участие эксперты КРОК Облачные сервисы, К2Тех и Arenadata. 

Онлайн-митап будет вам полезен, если
🔹Требуется быстро запустить новый проект анализа данных без крупных вложений в инфраструктуру и компетенции
🔹Нужна помощь профессионалов для внедрения и поддержки инструментов big data
🔹Необходимо повысить скорость аналитики больших данных
🔹Текущие системы и инфраструктура работы с данными базируются на продуктах зарубежных вендоров

Подробности и регистрация по ссылке http://croc.global/1u9

 Реклама. ЗАО "КРОК ИНКОРПОРЕЙТЕД". ИНН 7701004101. erid: LjN8KPoGK

Читать полностью…

Data Science | Machinelearning [ru]

​​13 ноября в Слёрм стартует поток «Профессия Data Scientist». 

Эксперты курса:
⚡️Иван Аникин, Team Lead Yandex.Edadeal
⚡️Владимир Бугаевский, Team Lead СберМаркет

Они расскажут, как создавать алгоритмы, которые автоматизируют труд и заставляют компьютеры «думать» самостоятельно.

Посмотреть подробную программу можно тут.

На курсе вы сможете научиться:
✔️анализировать и визуализировать большие объёмы данных;
✔️сводить бизнес-задачу в задачу машинного обучения;
✔️работать с данными разных типов.

Мы поможем уверенно стартовать в профессии: в конце обучения вы сможете сделать итоговый проект на реальных данных.

Это первый поток нового курса! Мы тщательно подбирали спикеров собрали наиболее актуальную информацию, подобрали заточенную на реальность практику. 

В курс мы добавили дополнительные углубленные модули — в них эксперты рассказывают, как обучить нейросети, использовать машинное обучение для решения бизнес-задач.

Записаться на курс можно по ссылке

Реклама. ООО «Слёрм» г. Лиски, ОГРН 1193668020545

Читать полностью…
Subscribe to a channel