devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​🛠Обслуживание моделей PyTorch с помощью TorchServe

В этой статье автор расскажет о том, как создавать и развертывать собственные модели PyTorch в производстве с помощью TorchServe.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Стать сотрудником Яндекса быстрее и проще, чем кажется. Участвуйте в днях быстрого найма: решите тестовое, пройдите несколько секций собеседования и получите офер за несколько дней.

Ближайшее мероприятие:

• 16-20 октября — Fast Track для технических менеджеров, офер за 5 дней в команду Crowd.

Зарегистрироваться

Реклама. ООО "Яндекс". erid:2Vtzqv5JoPP

Читать полностью…

Data Science | Machinelearning [ru]

​​📌 Как обучают нейросеть, которая помогает беспилотным автомобилям планировать движение и предсказывать действия других объектов на дороге

В этой статье автор из Яндекса объясняет, как нейросети помогают беспилотным автомобилям планировать движение, как работает система восприятия, как обучать такую модель и в чём проблема подхода. Автор рассказал, в чём преимущества машинного обучения перед эвристиками и чем может помочь Reinforcement Learning. 

Читать…

Читать полностью…

Data Science | Machinelearning [ru]

​​⭐️Краткое руководство по работе с данными с помощью Miller

В этой статье я расскажу о Miller — автономном, легковесном и мощном интерфейсе командной строки (Command Line Interface, CLI) для работы с данными в форматах CSV, JSON и некоторых других.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Яндекс открыл прием заявок на научную премию в области машинного обучения

Yandex ML Prize — это премия для ML-исследователей, их наставников и преподавателей из 11 стран. Наградят в этом году за достижения в сферах:

— распознавание и синтез речи;
— компьютерное зрение;
— информационный поиск и анализ данных;
— обработку языка и машинный перевод
— генеративные модели

Кандидаты могут подать заявку сразу в несколько номинаций — от «Первой публикации» до «Лучшего молодого научного руководителя». Единственное условие для исследователей — наличие публикаций или докладов, в том числе постера, на конференции A* или A за 2022–2023 гг. А для научных руководителей — более 5 студентов с такими публикациями. 

Победители получат от 500 тысяч рублей, грант на использование сервиса Yandex Cloud для исследований и подписку на Яндекс 360.

Не пропустите шанс заявить о себе научному сообществу — подать заявку можно до 16 октября по ссылке.

Реклама. ООО «Яндекс»

Читать полностью…

Data Science | Machinelearning [ru]

​​🎓 Математическая оптимизация для бизнеса в Yandex DataSphere

12 октября в 12:00, онлайн

Вебинар о математической оптимизации для бизнеса и решении подобных задач в ML-сервисе Yandex DataSphere. Вы узнаете, что такое математическая оптимизация и как она может принести пользу бизнесу.

Обсудим:

• основные компоненты оптимизационных задач;
• типичные бизнес-сценарии оптимизации;
• реальные проекты, в которых использовалась математическая оптимизация;
• примеры решения оптимизационных задач в сервисе Yandex DataSphere.

Зарегистрироваться на мероприятие можно по ссылке.

Реклама ООО "Яндекс.Облако" ИНН 7704458262

Читать полностью…

Data Science | Machinelearning [ru]

​​Сбер расширяет географию своих ивентов: 6 октября в Тбилиси состоится первый технологический митап, посвящённый разработке рекомендательных систем 👨‍💻

На RecSys MeetUp вы познакомитесь с экспертами Сбера, станете частью одного из крупнейших IT-комьюнити и узнаете о:

✔️ Технологических трендах в области искусственного интеллекта и машинного обучения.

✔️ Устройстве современных стримингов компаний-партнёров Сбера.

Гарантируем: будет интересно и безумно полезно каждому DS-специалисту. Регистрируйтесь по ссылке, встречаемся 6 октября в 18:30 по адресу: Тбилиси, Ресторан на 6 этаже отеля «Golden Palace», переулок Агмашенебели 62 💚

Читать полностью…

Data Science | Machinelearning [ru]

​​💻PyTriton inference server c Gradio: быстро и просто делаем демо для ML-проектов

Рассмотрим то как можно в одиночку быстро создать сервер и UI для ML приложения на Python с перспективой вывода в prod.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📊Становясь Пангеей: будущее современного стека для анализа данных

В этой статье я расскажу про тенденции в индустрии данных и аналитики, стратегические преимущества и проблемы, с которыми сталкиваются компании в ней, влияние основных облачных провайдеров на её будущее и роль стандартов в формировании в ней технологических экосистем.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Нейросеть, генерирующая нейросети. Часть 1. Генерация случайной свёрточной нейронной сети

В этой статье автор расскажет как написать нейросеть, которая сама будет создавать нейросети для решения каких-либо задач.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Анализируем отзывы пользователей с помощью датасета от Яндекса

В этой статье разработчики Яндекса рассказывают про крупнейший русскоязычный датасет отзывов на организации. Он содержит порядка полумиллиона отзывов пользователей на различные организации, собранных в январе-июне 2023 года.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💾Ещё один рецепт отказоустойчивого файлового сервера средствами PaceMaker

В этой статье автор расскажет как реализовать на площадке клиента хранение пользовательских файлов для разрабатываемого сервиса.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Как вывести свои навыки Дата Саентиста на максимум?

Бесполезно импортировать устаревшие библиотеки, бездумно генерировать фичи, и читать бредовые статьи по ускорению Pandas в 100 раз.

Подумайте сами, возможности дата сайентиста безграничны, вы можете - обрабатывать гигантские датасеты в пару строк кода, использовать новые LLM модели для генерации кода, пройти сертификационные курсы по МЛ от Google - совершенно бесплатно!

Об этом можно узнать здесь. Вообще канал «Анализ Данных» - единственное место в телеграме, где вы пройдете путь от -"гугл - как открыть csv в Pandas", до аналитика данных.

Ещё мы собрали маст-хэв-папку для всех  дата саентистов: /channel/addlist/G7ntgISJ23s5ZGQy

Подписывайтесь, такие знания в 2023-м году на вес золота: @data_analysis_ml

Читать полностью…

Data Science | Machinelearning [ru]

​​🛠Искусство ETL. Пишем собственный движок SQL на Spark [часть 5 из 5]

В этой статье автор расскажет об интерактивно-отладочном режиме REPL, клиенте и сервере, а также о генераторе документации.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

💬 Вступайте в сообщество MLOps-инженеров в Telegram. Там публикуем дайджесты, обсуждаем новые инструменты и технологии.

В сообществе вы найдете: 

▫️ Новости индустрии production ML;
▫️ Полезные статьи, инструменты и технологии;
▫️ Опыт коллег и лучшие практики.

Присоединяйтесь, чтобы получать новые знания от практиков MLOps и дата-аналитики: /channel/+5mBvVOEfED42YTcy

Реклама ООО «Селектел» 2Vtzqwi1EeB

Читать полностью…

Data Science | Machinelearning [ru]

​​📊Статистика по финансовым рынкам или будни дата-аналитика

В этой статье я покажу, как можно поиграть с данными, посмотреть статистику и понаблюдать за динамикой выбранных показателей.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🥸Исследование моделирования и развития гибкости на стадии проектирования производственной системы

В этой статье рассматриваются проблемы оценки гибкости для принятия решений с помощью метода оценки на основе цифрового двойника, который моделирует, прогнозирует и оценивает гибкость определенной схемы проектирования производственной системы (PSDS).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Аналитикам данных и специалистам по DS без математики никуда — она нужна на собеседованиях и в рабочих задачах. 

Чтобы наладить отношения с тервером, матаном и линалом, приходите на курс Яндекс Практикума.
— учебник для людей: не фундаментальный, но и не научпоп;
— интерактивные задания;
— практика на бизнес-кейсах;
— преподаватели в чате, которые объяснят непонятное;
— примеры задач из собеседований.

→ Пройти бесплатный урок

Читать полностью…

Data Science | Machinelearning [ru]

​​💰Как оценить объем работ по миграции хранилища данных на Arenadata DB / Greenplum: методика и пример

В этой статье я расскажу о том, как можно уменьшить стоимость владения хранилищами данных, построенных на западных технологиях.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💾Как мы создавали self-service функционал проверки качества данных для ML-моделей

В этой статье я расскажу о том, как мы превращаем банк в «биг дата» — организацию.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Исследования возможностей нейронных сетей глубокого обучения в распознавании маскируемого трафика

В данной статье мы рассматриваем новый подход к классификации прикладных протоколов в сетевых пакетах.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Краткий обзор интересного с practical ML conf от Яндекса:

👉 Руководитель группы модернизации нейронных сетей Яндекса, Алексей Морозов, рассказал про подходы, которые они применяют в распределенном DL для обеспечения zero cost fault tolerance.

👉 Head of AI, Third Opinion Евгений Сидоров, рассказал о методе анализа медицинских снимков на основе множественных проекций – он позволяет восполнить недостаток трехмерной визуальной информации. 

👉 Юлий Шамаев из ВТБ рассказал про геоэмбеддинги – векторное представление контекста в пространственной аналитике. Его команда используют их, чтобы определить лучшее расположение для банкоматов и банковских отделений. 

Записи всех выступлений конференции можно посмотреть по ссылке

Читать полностью…

Data Science | Machinelearning [ru]

​​📊Как настроить сбор статистики и автоматическое отключение пользователей WireGuard в ispmanager с помощью Python и API

В статье я рассказываю о том, как достигнуть нужных себе целей и изучить пару вариантов взаимодействия с ispmamager.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤Что есть NER сервисы и как их применяют в бизнесе от А до Я

В этой статье автор рассмотрит логику и принцип работы NER.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧑‍💻Сам себе BI-аналитик или как навести порядок в отчётности компании

В этой статье автор расскажет как можно навести порядок в отчётности, и с какими проблемами вы можете столкнуться в процессе.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​Стартануть в IT быстро и эффективно — подготовительный курс по Frontend-разработке.

⏰ Старт 5 октября!

Даем: 72 урока с практикой в браузере, 3 онлайн вебинара и 1 сессию лайвкодинга с практикующим разработчиком.

Получаем: крепкие знания базы языка, умение понимать код и первую программу на JavaScript, написанную вместе с наставником.

Запишитесь прямо сейчас!

Реклама. ООО "ХЕКСЛЕТ РУС". ИНН 7325174845. erid: LjN8Jud6R

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Оптимизация работы с Camunda на основе External task

В этой статье речь пойдет об опыте перехода на паттерн external task.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧙Point-in-time Recovery. Как уменьшить RPO для базы данных

В этой статье мы на примере PostgreSQL разберем принципы работы баз данных и поговорим о том, как минимизировать последствия инцидентов с помощью оптимизации RPO.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📝Форматы ORC и Parquet на базе HDFS

В статье мы рассмотрим тему форматов ORC и Parquet, как их правильно использовать и хранить, чтобы всем было хорошо.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

🧑‍💻 Что прикольного (и полезного) почитать из IT?

Нашли канал предпринимателя, который пилит свои проекты на Python. А потом с шутками рассказывает, как он их делал. 

Канал называется LOVESYUK (/channel/lovesyuk). На него уже залили посты о том: 

— Как написать расширение (/channel/lovesyuk/128) с GPT-4 для пикапа девушек на сайтах знакомств
— Как сделать онлайн-игру (/channel/lovesyuk/141) для компании с 6.000 шуток 
— Как работает нейросеть (/channel/lovesyuk/134) на Python, переписывающая собственный код 

Подписывайтесь, у него интересно → @lovesyuk

Читать полностью…
Subscribe to a channel