Data Science | Machinelearning [ru]

06 September 2024 19:08

​​😎CDM: надежная метрика для справедливой и точной оценки распознавания формул

Character Detection Matching (CDM), обеспечивает объективность оценки путем разработки метрической оценки на уровне изображения, а не на уровне LaTex.

В частности, CDM преобразует как предсказанные моделью формулы LaTeX, так и наземные формулы LaTeX в формулы, отформатированные в виде изображения, затем использует визуальные методы извлечения признаков и локализации для точного сопоставления на уровне символов, включая информацию о пространственном положении.

Такой пространственно-ориентированный и сопоставленный с символами метод предлагает более точную и справедливую оценку по сравнению с предыдущими метриками BLEU и Edit Distance, которые полагаются исключительно на сопоставление символов на основе текста.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

05 September 2024 19:07

​​😎Как наука о данных трансформирует здравоохранение

В этой статье рассматривается роль Data Science в медицинской сфере, её основные применения, преимущества, проблемы, а также будущие тенденции.

Читать...

Data Science | Machinelearning [ru]

05 September 2024 14:07

​​🤔«А можно быстрее?»: разбираем методы ускорения обучения нейронных сетей

В этой статье рассмотрим различные теоретические аспекты от аппаратного ускорения до правильной организации самого обучения.

Читать...

Data Science | Machinelearning [ru]

04 September 2024 19:07

​​🖥 Самые интересные статьи за последние дни:

• Почему нейросети становятся угрозой для природы и что с этим сделать

• Контролируемое и неконтролируемое машинное обучение — в чём разница?

• Агрегация данных для аналитики продаж с помощью DataSphere Jobs и Airflow SDK

Data Science | Machinelearning [ru]

03 September 2024 19:07

​​😎Mini-Omni: Language Models Can Hear, Talk While Thinking in Streaming

Сквозная разговорная модель на основе аудио, способная к речевому взаимодействию в реальном времени.

Метод также помогает сохранить языковые возможности исходной модели с минимальным ухудшением, что позволяет другим работам устанавливать возможности взаимодействия в реальном времени.

Mini-Omni — это первая полностью сквозная модель с открытым исходным кодом для речевого взаимодействия в реальном времени, предлагающая ценный потенциал для будущих исследований.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

02 September 2024 19:07

​​🗣InkubaLM: A small language model for low-resource African languages

​​InkubaLM, небольшая языковая модель с 0,4 миллиарда параметров, которая достигает производительности, сопоставимой с моделями со значительно большим количеством параметров и более обширными данными обучения для таких задач, как машинный перевод, вопросы и ответы, AfriMMLU и задача AfriXnli.

В частности, InkubaLM превосходит многие более крупные модели в анализе настроений и демонстрирует замечательную согласованность на нескольких языках.

Эта работа представляет собой решающий шаг в оспаривании общепринятой парадигмы, согласно которой эффективные языковые модели должны полагаться на значительные ресурсы.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

01 September 2024 19:07

​​🖥 Самые интересные статьи за последние дни:

• Как мы обучали нейросеть распознавать юридические документы

• Топ-7 высокооплачиваемых профессий в сфере ИИ

• Создание искусственного датасета для обучения модели с использованием Paddle OCR

Data Science | Machinelearning [ru]

31 August 2024 19:07

​​⚡️Хайп вокруг аппаратного ускорения ИИ и реальная ситуация. Обучение модели на телефоне и результаты в миллисекундах

В этой статье мы запустим TensorFlow Lite на устройствах разного класса и года выпуска и посмотрим, что там с производительностью и ускорением.

Читать...

Data Science | Machinelearning [ru]

30 August 2024 19:07

🗣Яндекс анонсировал Practical ML Conf, которая пройдет 14 сентября и будет доступна для просмотра онлайн

Это мероприятие, на котором Яндекс ежегодно анонсирует свои крупные запуски и делится опытом.

Все подробности и регистрация тут

@Devsp — Подписаться

Data Science | Machinelearning [ru]

30 August 2024 14:10

​​😍Топ-7 высокооплачиваемых профессий в сфере ИИ

В этой статье мы разберёмся, что ждёт работодателей и соискателей в ближайшем будущем и каким специалистам в сфере ИИ, или AI, готовы платить больше всего.

Читать...

Data Science | Machinelearning [ru]

29 August 2024 19:07

​​🗣Dolphin: длинный контекст как новая модальность для энергоэффективных языковых моделей на устройстве

Подход решает проблемы значительного потребления энергии и задержек, присущие моделям на устройстве.

Dolphin использует компактный декодер параметров 0,5B для извлечения обширной контекстной информации во встраивание памяти, существенно сокращая длину входных данных для первичной модели декодера параметров 7B.

Этот инновационный метод позволяет обрабатывать существенно более длинные контексты без типичных вычислительных затрат, связанных с расширенными последовательностями входных данных.

Эмпирические оценки демонстрируют 10-кратное улучшение энергоэффективности и 5-кратное сокращение задержек по сравнению с обычными методами обработки полноразмерного контекста без потери качества ответа.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

28 August 2024 19:07

​​🖥 Самые интересные статьи за последние дни:

• Долой рандом, или ищем лучшие настройки для аугментации текстов

• Гайд по работе языковых моделей для начинающих

• Встречаем OmniCast — технологию, которая повысит точность прогноза температуры с помощью пользовательских метеостанций

Data Science | Machinelearning [ru]

28 August 2024 09:37

Как тренировать нейросети быстрее, ускорить машинное обучение и визуализацию данных?

Серверы с GPU ускоряют вычисления, проведение ML-экспериментов и анализа больших данных, а еще легко справляются с классификацией изображений и распознаванием речи. Необязательно иметь собственный сервер, можно арендовать GPU в облаке в Selectel.

В 2024 году облако Selectel вошло в топ-3 лучших российских провайдеров рейтинга GPU Cloud, по версии CNews.

Преимущества аренды облачного сервера с GPU в Selectel:

- Гибкие конфигурации. Возможность выбрать сервер как готовой, так и произвольной конфигурации с нужной видеокартой. Мгновенное масштабирование под растущие нагрузки.
- Большой выбор карт в наличии : А2, А30, A100, A2000, A5000, Tesla T4, GTX1080 и RTX 2080.
- Оплата за фактически использованные ресурсы от 29 ₽/час
- Безопасность хранения и обработки данных. Облачные серверы соответствуют 152-ФЗ (УЗ-1), есть сертификаты PCI DSS, а также ISO 27001, 27017, 27018 и другие

Арендуйте серверы с GPU с почасовой оплатой: https://slc.tl/dscnh

Реклама АО «Селектел». ИНН: 7810962785 Erid: 2VtzqvqmQ7X

Data Science | Machinelearning [ru]

27 August 2024 14:07

​​⛅️Встречаем OmniCast — технологию, которая повысит точность прогноза температуры с помощью пользовательских метеостанций

В этой статье мы расскажем о том, как при помощи фильтра Калмана и комбинации двунаправленной и однонаправленной LSTM-нейросетей нам удалось улучшить качество прогноза температуры.

Читать...

Data Science | Machinelearning [ru]

26 August 2024 14:07

​​🧐Долой рандом, или ищем лучшие настройки для аугментации текстов

Расскажу о том, как мы оптимизировали параметры аугментаций для текстовых данных и что из этого получилось.

Читать...

Data Science | Machinelearning [ru]

06 September 2024 14:07

​​💽 Как мы построили модель прогнозирования выхода жестких дисков из строя

В этой статье я расскажу, что нам удалось сделать, что стало основой прототипа нашей прогнозной модели и какие результаты она показала в применении для дисков в серверах YADRO.

Читать...

Data Science | Machinelearning [ru]

05 September 2024 16:07

21 сентября в расслабленной обстановке на свежем воздухе пройдёт Код-пленэр от Яндекса!

Встретимся с коллегами из Яндекса, чтобы порисовать кодом в саду, послушать про творчество в IT, поделиться опытом решения рабочих и не только проектов и подышать свежим воздухом в одну прекрасную сентябрьскую субботу.

Главным событием станет воркшоп по p5.js. На нём ваши навыки программирования пригодятся неожиданным образом: с помощью кода вырастите дерево, которое станет частью общего диджитал-леса.

Вечером мы увидим получившийся лес на большом экране. А потом завершим день у костра под DJ-сеты.

Заполняйте форму как можно подробнее и регистрируйтесь!

До встречи на Код-пленэре! 🔥

Data Science | Machinelearning [ru]

05 September 2024 10:37

📹Новая версия YandexART (Vi) — как она устроена?

В статье на Хабре Яндекс рассказывает о процессе обучения нейросети, которая при генерации видео учитывает связь между кадрами и воссоздаёт реалистичные движения объектов.

Читать...

Data Science | Machinelearning [ru]

04 September 2024 14:11

​​📊Агрегация данных для аналитики продаж с помощью DataSphere Jobs и Airflow SDK

В этой статье покажем, как мы ускорили построение пайплайнов обработки данных с помощью связки DataSphere Jobs и Apache Airflow™.

Читать...

Data Science | Machinelearning [ru]

03 September 2024 14:07

​​🤖Контролируемое и неконтролируемое машинное обучение — в чём разница?

В этой статье объясняются эти оба метода и различия между ними.

Читать...

Data Science | Machinelearning [ru]

02 September 2024 14:08

​​👾Почему нейросети становятся угрозой для природы и что с этим сделать

В этой статье мы расскажем, как это влияет на работу и развитие дата-центров, и какие меры можно предпринять для увеличения энергоэффективности.

Читать...

Data Science | Machinelearning [ru]

01 September 2024 14:27

​​😍Автоматизация Code Review с помощью LLM

В этой статье мы подробно рассмотрим жизненный цикл ревью и подход RAG, разработанный в Faire для выполнения различных контекстно-специфических автоматизированных ревью.

Читать...

Data Science | Machinelearning [ru]

31 August 2024 14:08

​​⚙️Как котята лапками настраивают GPU в Kubernetes и при чем тут эффект Манделы

В этой статье мы рассмотрим волшебный инструмент, который позволяет это делать без костылей и велосипедов, если у вас лапки.

Читать...

Data Science | Machinelearning [ru]

30 August 2024 17:37

​​👾Создание искусственного датасета для обучения модели с использованием Paddle OCR

В этой статье мы подробно расскажем, как именно подошли к этому процессу.

Читать...

Data Science | Machinelearning [ru]

30 August 2024 09:07

МТС Web Services запустила два новых кластера виртуальной инфраструктуры с графическими ускорителями, тем самым увеличив собственные GPU-мощности для обучения искусственного интеллекта на 40%. До конца года эта цифра увеличится еще в 3-4 раза.

Запуск новых сегментов позволит большему числу предприятий упростить и ускорить обучение и инференс собственных AI- и ML-моделей, за счет размещения их в облаке MWS. Инфраструктура подойдет для работы с любыми AI-моделями во всех отраслях экономики. А получить доступ к ней можно из любой точки страны.  
 
Также до конца года на базе GPU-инфраструктуры будут развернуты: платформа для разработки, обучения и развертывания ML-моделей, уже готовые модели ИИ для разных индустрий и направлений, доступные по API и AI-сервисы по модели SaaS.

@Devsp — Подписаться

Data Science | Machinelearning [ru]

29 August 2024 14:07

​​👾Как мы обучали нейросеть распознавать юридические документы

В этой статье мы рассмотрим разработку нейронной сети для анализа и верификации юридических документов, в частности, нормативных правовых актов.

Читать...

Data Science | Machinelearning [ru]

28 August 2024 14:07

​​🗣Гайд по работе языковых моделей для начинающих

В этой статье вы узнаете о том, как устроены самые популярные языковые модели и что нужно знать, чтобы начать с ними работать.

Читать...

Data Science | Machinelearning [ru]

27 August 2024 19:07

​​🔥K-Sort Arena: Efficient and Reliable Benchmarking for Generative Models via K-wise Human Preferences

Эффективная и надежная платформа, основанная на ключевом понимании: изображения и видео обладают более высокой интуитивностью восприятия, чем тексты, что позволяет быстро оценивать несколько образцов одновременно.

K-Sort Arena использует сравнения K-wise, позволяя моделям K участвовать в соревнованиях «все против всех», которые дают гораздо более богатую информацию, чем парные сравнения. Для повышения надежности системы мы используем вероятностное моделирование и байесовские методы обновления.

Благодаря своей высокой эффективности K-Sort Arena может непрерывно включать новые модели и обновлять таблицу лидеров с минимальным количеством голосов.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

26 August 2024 19:07

​​🤗CustomCrafter: индивидуальная генерация видео с сохранением движения и возможностей концептуальной композиции

Новую структуру, которая сохраняет способность модели генерировать движение и концептуальные комбинированные способности без дополнительного видео и тонкой настройки для восстановления.

Для сохранения концептуальной комбинированной способности мы разрабатываем модуль plug-and-play для обновления нескольких параметров в VDM, улучшая способность модели захватывать детали внешнего вида и способность концептуальных комбинирований для новых субъектов.

Используя подключаемость наших модулей обучения объекта, мы уменьшаем влияние этого модуля на генерацию движения на ранней стадии шумоподавления, сохраняя возможность генерировать движение VDM.

На более поздней стадии шумоподавления мы восстанавливаем этот модуль, чтобы восстановить детали внешнего вида указанного объекта, тем самым обеспечивая точность внешнего вида объекта.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Data Science | Machinelearning [ru]

25 August 2024 19:07

​​🖥 Самые интересные статьи за последние дни:

• MLSecOps: почему, зачем и кому это нужно?

• Практический кейс реализации AutoML в банке

• ML в маркетинге: как модели делают банк более чутким к негативу