devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​👁«SAM и тут и сям»: Segment Anything Model в задачах компьютерного зрения (часть 2)

В этой статье мы рассмотрим, как SAM может применяться для решения таких задач, как inpainting, tracking, 3D-сегментация и 3D-генерация, а также увидим, как SAM работает на датасетах из медицинской сферы и сравним дообученую модель с базовыми весами.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👁Сделай SAM: Segment Anything Model в задачах компьютерного зрения (часть 1)

В этой статье мы рассмотрим, как можно улучшить качество и производительность SAM: научить модель генерировать более детализированные и гранулярные маски, а также ускорить её работу в 50 раз и адаптировать для мобильных устройств.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🖼12 лучших инструментов аннотирования изображений на 2023 год

В этой статье мы обсудим критерии, использованные для оценки этих инструментов, их плюсы и минусы, а также сравним их между собой.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🙈Как получить полезную информацию из своих категориальных признаков?

В этой статье расскажу про способы работы с ними, которыми пользуюсь сам.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤Data Consistency: как быть уверенным, что с данными всё ок

В этой статье я хочу поделиться своим опытом по решению этой комплексной задачи и бонусом покажу примеры использования array functions в ClickHouse.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Как выбрать GPU для машинного обучения

В этой статье мы рассказали, на какие параметры графических ускорителей стоит обращать внимание, если планируете работать с машинным обучением.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🦾OSINT: инструменты

В этой статье вы узнаете о некоторых инструментах, которые помогут вам узнать о человеке максимум.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🥸Введение в data science: инструменты и методы анализа

В этой статье вы узнаете, как наука о данных обнаруживает скрытые закономерности, предвидит события и извлекает важные идеи из огромного количества данных, окружающих нас в современном обществе.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

🏆 Yandex Cup 2023 — открытый чемпионат для настоящих творцов 

Разработчики — художники нового мира. Они создают смыслы, правила и законы, манифестируют идеи, творят миры и целые вселенные. И, если их предшественники делали это, используя слова, краски и звуки, то современные творцы создают новую реальность с помощью программного кода. 

Искусство писать код

Тема чемпионата в этом году «Решаем искусство». Участников ждут нестандартные задачи на стыке IT и творчества, а лучшие встретятся лицом к лицу в финале, чтобы оживить арт-инсталляцию и разделить между собой 8 500 000 рублей.

Показать своё мастерство можно в 6 направлениях:

🔸 Фронтенд
🔸 Бэкенд
🔸 Мобильная разработка
🔸 Аналитика
🔸 Алгоритмы
🔸 Машинное обучение

Финал и церемония награждения пройдут офлайн в офисе Яндекса в Казахстане. Яндекс предоставит финалистам проезд и проживание в Алматы.

Регистрация открыта до 29 октября включительно:

👉 Участвую! 

#Yandex_Cup23

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Создание искусственного интеллекта для игры Баше без нейронных сетей

В данной статье я хочу раскрыть суть машинного обучения на примере создания искусственного интеллекта

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🗣SAGE: коррекция орфографии с помощью языковых моделей

В этой статье мы расскажем, как решали эту проблему внутри SberDevices, и как это привело к созданию проекта по исследованию задачи коррекции текста.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Делюсь находкой для любителей слушать ушами: подкаст про специфику работы с данными для MLOps: https://podcast.ru/e/3Ldlf9-6ebG

Это уже второй эпизод про MLOps в подкасте «Деньги любят техно», который дела-ет команда Data Science из ВТБ. В гости приходят эксперты из разных компаний и организаций, в последнем выпуске — Алексей Незнанов, к.т.н, старший научный со-трудник международной лаборатории интеллектуальных систем и структурного ана-лиза НИУ ВШЭ. В описании к выпуску есть полезные ссылки.

Читать полностью…

Data Science | Machinelearning [ru]

​​🎃Классификация текстов в spaCy: пошаговая инструкция

В этой статье вы узнаете, как реализовать классификатор текстов при помощи библиотеки spaCy, а также несколько полезных лайфхаков, которые помогут ускорить обработку.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐Разметка данных при помощи GPT-4

В этой статье мы расскажем о том, как можно использовать GPT-4 с целью настройки меток для различных задач.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​💪 Тренды, новые подходы и вызовы в ML-индустрии: онлайн-митап для специалистов в области машинного обучения

Записываем в календари: 25 октября, ML Party, бесплатно по регистрации. Узнаете, как методы обучения с подкреплением позволяют повысить полезность, безопасность и правдивость генеративных моделей. Эксперты Яндекса объяснят, как они группируют предложения магазинов в карточки товаров и при чём тут HNSW и CatBoost, и расскажут о проекте на стыке ML-технологий и ecom-продукта. 

Регистрация…

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀Ускоряем процесс разметки с помощью интерактивной сегментации

В этой статье мы поговорим про задачу интерактивной сегментации на основе кликов (click-based) и как она может ускорить процесс разметки данных для различных типов сегментации.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🦹‍♂Борьба с несбалансированными данными

В этой статье автор расскажет что же делает борьбу с несбалансированными данными такой сложной задачей.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🏆 Yandex Cup 2023 — открытый чемпионат для настоящих творцов 

Разработчики — художники нового мира. Они создают смыслы, правила и законы, манифестируют идеи, творят миры и целые вселенные. И, если их предшественники делали это, используя слова, краски и звуки, то современные творцы создают новую реальность с помощью программного кода. 

Искусство писать код

Тема чемпионата в этом году «Решаем искусство». Участников ждут нестандартные задачи на стыке IT и творчества, а лучшие встретятся лицом к лицу в финале, чтобы оживить арт-инсталляцию и разделить между собой 8 500 000 рублей.

Показать своё мастерство можно в 6 направлениях:

🔸 Фронтенд
🔸 Бэкенд
🔸 Мобильная разработка
🔸 Аналитика
🔸 Алгоритмы
🔸 Машинное обучение

Финал и церемония награждения пройдут офлайн в офисе Яндекса в Казахстане. Яндекс предоставит финалистам проезд и проживание в Алматы.

Регистрация открыта до 29 октября включительно:

👉 Участвую! 

#Yandex_Cup23

Читать полностью…

Data Science | Machinelearning [ru]

❗️Больше не нужно платить бешеные деньги для того чтобы изучить фотошоп❗️

Миллион слитых курсов по дизайну и графике уже ждут тебя по ссылкам ниже: 👌⬇️🤫 

⤷NeuroEffect (44 курса)

 ⤷Blender (113 курса)

  ⤷Photoshop (236 курсов)

   ⤷Pro Create (111 курсов )

    ⤷3D Max (345 курсов)

    ⤷After Effects (164 курса)

     ⤷Figma (425 курса)

      ⤷Не упусти, подписывайся.

Читать полностью…

Data Science | Machinelearning [ru]

​​Открыта регистрация на отборочный этап Всероссийского хакатона по биометрии с призовым фондом 1 000 000 рублей!
⠀
Тебе предстоит решить интересные задачи, чтобы победить в отборочном туре и принять участие в финале Всероссийского хакатона по биометрии, который пройдет уже 24-25 ноября в Москве. 

Кейсы:
• Создание дипфейков для тестирования
• Обнаружение дипфейков
• Некооперативный фронтальный алгоритм защиты от атак предъявления
• Решения для использования новых биометрических модальностей на пользовательских устройствах
⠀ ⠀
🗓 Даты отборочного этапа в ОНЛАЙН-ФОРМАТЕ: 3-5 ноября 2023 года  
❗️Даты финала: 24-25 ноября 2023 года 📍 Место: Москва
❗️ Формат: смешанный (отборочный этап в онлайн-формате, а финал на площадке в Москве)
👉 Регистрация на отборочный тур открыта до 29 октября 2023 года: https://tglink.io/5850df1aaafc 

 Реклама. ООО "АКСЕЛЕРАТОР ВОЗМОЖНОСТЕЙ". ИНН 9704005146. erid: LjN8KVrmc

Читать полностью…

Data Science | Machinelearning [ru]

Существуют художники-экспериментаторы, которые выращивают картины в чашках Петри, используя микроорганизмы вместо красок. Вам нужно помочь одному из таких художников минимизировать затраты на расходники, чтобы создать концептуальное творение для выставки “Коты в искусстве”. 

Это пример одной из задач контеста Yandex Cup 2023 — первого тура чемпионата. Присоединяйтесь, победит тот у кого будет лучший кот (зачеркнуто) код. 

В этом году призовой фонд — 8,5 млн. рублей. 

Подать заявку можно здесь до 29 октября включительно.

Читать полностью…

Data Science | Machinelearning [ru]

Если вы уже знакомы с ML-моделями или даже работаете на позиции джуниор-специалиста, для получения следующего грейда будет кстати наставничество опытных коллег и дополнительная практика. Всё это можно найти на курсе Яндекс Практикума. 

За 4 месяца:
— вы поймёте, как переводить бизнес-задачу на язык машинного обучения,
— научитесь строить продвинутые ML-модели,
— создадите 3 сервиса в облаке для решения задач бизнеса. 

Всю дорогу с вами будут наставники и такие же как вы студенты — для обратной связи и поддержки. 

Начните курс с бесплатной вводной части, она поможет понять, подходит ли вам программа. А если решите продолжать учиться — до 30 ноября действует скидка 20% к Чёрной пятнице. 

→ Приходите учиться, чтобы расти в карьере.

Читать полностью…

Data Science | Machinelearning [ru]

​​😉Как применять метод PCA для уменьшения размерности данных

В этой статье мы поговорим о методе, который считается одним из наиболее мощных инструментов в арсенале данных разработчиков — методе главных компонент, или PCA (Principal Component Analysis).

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👣Airflow в Kubernetes. Часть 1

В этой статье мы рассмотрели минимальный набор сущностей, необходимый для запуска Airflow.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

🔥 Бесплатный вебинар: “Решаем тестовое задание на junior-аналитика в Банк Открытие”

Интересуетесь аналитикой данных? Хотите больше практиковаться на реальных задачах и кейсах?

Приходите на наш бесплатный вебинар, где мы в прямом эфире будем вместе решать настоящее тестовое задание на junior-аналитика в Банк Открытие.

📅 Дата: 25 октября
⏰ Время: 19:00 по Мск 

Что предстоит сделать на вебинаре:

* Решить 4 задания по SQL: посчитаем метрику MoM
* Проанализировать ОТП-коды в разрезе категорий и времени
* Проанализировать активность клиентов с помощью Pandas
* Предложить 3 метрики первого уровня для интернет-банка

Мы подробно будем разбирать каждый шаг и будем много говорить о SQL, Python, продуктовых метриках 😉

А также каждого участника вебинара будут ждать несколько подарков, подборка лайфхаков и разбор самых частых ошибок 🤩

🔗 Регистрация на вебинар

Реклама. ООО "Айти Резюме". Erid: LjN8JwMKT

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Дообучение ruGPT-3.5 13B с LoRA

В данной статье мы разберем каждый этап обучения модели, начиная от подготовки данных и заканчивая конвертацией в формат GGML.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📊Как использовать GPU для ускорения аналитической обработки данных

В этой статье мы расскажем о трех шагах, которые помогут внедрить GPU в работу компании.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤YTsaurus SPYT: помогаем планировщику Apache Spark быть ещё эффективнее

В этой статье я расскажу как мы в рамках YTsaurus делали его ещё эффективнее.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👤Размерности качества данных: обеспечение качества данных с помощью Great Expectations

В этой статье рассматриваются шесть размерностей качества данных: полнота, согласованность, целостность, вневременная актуальность, уникальность и валидность.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🦾Как Guidance выводит ИИ на новый уровень: инструмент для эффективного управления моделями

В данной статье мы рассмотрим его особенности и разберемся, что же это за "зверь".

Читать...

Читать полностью…
Subscribe to a channel