devsp | Unsorted

Telegram-канал devsp - Data Science | Machinelearning [ru]

19745

Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM. MAX - https://max.ru/devsp Личный блог - @just_genych По вопросам рекламы или разработки - @g_abashkin РКН: https://vk.cc/cJPGXD

Subscribe to a channel

Data Science | Machinelearning [ru]

​​😍SeaLLMs 3: Open Foundation и чат-модели больших многоязычных языков для языков Юго-Восточной Азии

Модель отлично справляется с такими задачами, как знание мира, математическое обоснование, перевод и следование инструкциям, достигая самой высокой производительности среди моделей аналогичного размера.

Используя эффективные методы улучшения языка и специально созданный набор данных для настройки инструкций, SeaLLMs 3 значительно снижает затраты на обучение, сохраняя при этом высокую производительность и универсальность.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

❓Готовы узнать, как использовать NoSQL в облаках?

Ждём вас на открытом вебинаре «Архитектура и дизайн систем на основе NoSQL в облаках» 1 августа в 20:00 мск, где вы разберете:

- основы NoSQL и его применение в облачных средах;
- типы и преимущества NoSQL баз данных;
- практическое руководство по настройке и развертыванию NoSQL баз данных в популярных облачных платформах;
- масштабирование и управление производительностью NoSQL баз данных;
- реальные примеры и кейсы.

Урок будет полезен разработчикам и архитекторам систем, которые хотят получить теоретические знания и практические навыки для эффективного использования NoSQL баз данных в облаках.

Спикер Наталия Титова — опытный аналитик и преподаватель в области баз данных, анализа данных и DS. Старший преподаватель в департаменте прикладной математики МИЭМ НИУ ВШЭ.

👉 Регистрируйтесь прямо сейчас, чтобы не пропустить бесплатный урок: https://otus.pw/D8c9/

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Как ИИ-компании переживают “нефтяной кризис”? Как медийные платформы зарабатывают, не делая почти ничего?

В этой статье авто расскажет о том, как ИИ компании переживают кризис данных, а платформы по распространению контента зарабатывают миллиарды долларов, не делая при этом ничего.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🦆 Всё что нужно знать про DuckDB

В этой статье рассказано, как вам может помочь утка при работе с данными, с OLAP-нагрузкой и как она может плавать в вашем Data Lake.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​👾Применение нейронных сетей для анализа графов со свойствами гомофилии и гетерофилии

В этой статье мы рассмотрим новый метод для улучшения производительности GNN в графах с гетерофилией, который может привести к созданию более точных и адаптивных моделей для сложных графовых структур.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

Появляется новый тип баз данных — делаем обзор! Дата-инженер из финтех-компании Точка Николай Мозганов расскажет, как пользоваться векторными базами данных для ML-задач. Если коротко: теперь в вектор можно превратить слова, предложения и даже звуки.

Читайте статью и задавайте вопросы в комментариях!

Читать полностью…

Data Science | Machinelearning [ru]

​​🔈AST: Audio Spectrogram Transformer

Audio Spectrogram Transformer применяет Vision Transformer к аудио, превращая аудио в изображение (спектрограмму).

Модель получает самые современные результаты для классификации аудио.

🤗 Hugging Face
🖥 GitHub
🟡 Архив

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐 Aim: Простой и удобный open-source трекер для отслеживания ML-экспериментов

Aim - это инструмент, поддерживающий отображение большого количества тренировочных прогонов (до 10.000 training runs).

Он предоставляет возможность аналитики и сравнения выполненных запусков тренировок моделей, а его SDK позволяет программно получать доступ к отслеживаемым метаданным для последующей автоматизации в Jupyter Notebook.

🟡Demos: Machine translation experiments | Lightweight-GAN experiments | FastSpeech 2 experiments | Simple MNIST
🖥GitHub
🟡Документация

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🗣Искусство общения с LLM: Гайд по техникам Prompt Engineering

В этом гайде мы поговорим о подготовке к prompt-engineering, о базовых принципах написания промпта, про его структуру и про типы решаемых задач.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​📱 MobileLLM: оптимизированные субмиллиардные LLM для мобильных устройств

MobileLLM демонстрирует значительное улучшение производительности по сравнению с предыдущими моделями аналогичного размера.

Например, версии на 125M и 350M параметров показывают на 2.7% и 4.3% соответственно лучшую точность.

Архитектура разработана с учетом ограничений мобильных устройств по памяти и вычислительной мощности. Применяются методы функции активации (SwinGLU), embedding sharing и группировки внимания.

Методика, представленная в MobileLLM, может быть применен к моделям различных размеров, от 125M до 1.5B параметров.

MobileLLM показывает хорошие результаты в задачах чата и вызова API, приближаясь к производительности гораздо более крупных моделей в некоторых сценариях.

🖥Github
🟡Arxiv

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🖥 Самые интересные публикации за последние дни:

• GeoWizard — новая модель для оценки 3D-параметров изображений

• Уже пора программировать с помощью LLM или пока рановато?

• Обновление nanoLLaVA-1.5 1B

Читать полностью…

Data Science | Machinelearning [ru]

🌍 Новая реальность: посетить концерт, не выходя из дома, увидеть друзей, находясь за тысячи километров, получить высшее образование по Data Science удалённо.

Когда виртуальные границы стираются, самое время применить технологии с пользой. Онлайн-бакалавриат Нетологии и ТюмГУ «Аналитика и Data Science» — способ получить диплом о высшем образовании из любой точки мира.

За 4 года вы освоите навыки работы с данными и станете бакалавром в области математики, который умеет работать с Big Data, компьютерным зрением и искусственным интеллектом. Будете закреплять знания на практике, создадите портфолио и сможете строить карьеру аналитика данных или Data Scientist.

Во время учёбы у вас будут все студенческие льготы и скидки, а в конце вы получите диплом очного бакалавриата ― такой же, как у студентов офлайн-обучения.

Узнать подробности о программе 👉https://netolo.gy/dgU6
Реклама ООО “Нетология” 2VSb5wW9y2Q

Читать полностью…

Data Science | Machinelearning [ru]

​​👩‍💻Уже пора программировать с помощью LLM или пока рановато?

В этой статье я буду делать с помощью LLM рефакторинг двух образцов грязного кода и анализ результатов.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​⚡️Обновление nanoLLaVA-1.5 1B

На днях обновилась Vision-Language модель nanoLLaVA-1.5 1B для работы на edge девайсах.

nanoLLaVA-1.5 — это «маленькая, но мощная» модель языка видения 1B, разработанная для эффективной работы на периферийных устройствах.

Значительно улучшилась производительность по сравнению с v1.0, при этом размер остался таким же небольшим, что очень удобно для многих применений

🤗 Hugging Face
🖥Github

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🌟Arcee Agent 7B — свежая модель на базе Qwen2-7B

Arcee Agent — это передовая модель языка параметров 7B, специально разработанная для вызова функций и использования инструментов.

Инициализированная с Qwen2-7B, она конкурирует по производительности с гораздо более крупными моделями, сохраняя при этом эффективность и скорость.

Эта модель особенно подходит для разработчиков, исследователей и предприятий, стремящихся реализовать сложные решения на основе ИИ без вычислительных издержек более крупных языковых моделей.

🤗 Hugging Face

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🧠Генерация текстового контента с ИИ: обзор и сравнение моделей

В этой статье мы рассмотрим работу различных ИИ-моделей на примере четырех нестандартных промтов, анализируя их сильные стороны, слабости и потенциал для дальнейшего развития.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​🚀MIBench: Оценка многомодульных больших языковых моделей на основе нескольких изображений

Метод комплексной оценки мелкозернистых возможностей MLLM в сценариях с несколькими изображениями.

В частности, MIBench классифицирует многообразные возможности по трем сценариям: многообразное обучение (MII), многомодальный поиск знаний (MKS) и многомодальное контекстное обучение (MIC) и создает 13 задач с общим количеством 13 тыс. аннотированных образцов.

Во время построения данных для MII и MKS модель извлекает правильные варианты из ручных аннотаций и создаем сложные отвлекающие факторы для получения вопросов с несколькими вариантами ответов.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🗣Dallah: Мультимодальная большая языковая модель с учетом диалектов для арабского языка

Dallah демонстрирует свою способность обрабатывать сложные диалектные взаимодействия, включающие как текстовые, так и визуальные элементы.

Модель преуспевает в двух контрольных тестах: один оценивает ее производительность на современном стандартном арабском языке (MSA), а другой специально разработан для оценки диалектных ответов.

Помимо надежной работы в задачах мультимодального взаимодействия, Dallah обладает потенциалом проложить путь для дальнейшего развития арабских MLLM-систем, учитывающих диалекты.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🤩 Diffree: Текстовая визуализация свободных объектов с использованием модели диффузии

Модель облегчает текстовое управление добавлением объектов с помощью только текстового управления.

Diffree однозначно предсказывает положение нового объекта и выполняет добавление объектов с помощью только текстового руководства.

Обширные эксперименты показывают, что Diffree отлично справляется с добавлением новых объектов с высокой степенью успеха, сохраняя при этом последовательность фона, пространственную уместность, а также релевантность и качество объектов.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐Make-An-Agent: генератор обобщающей политической сети с диффузией, обусловленной поведением

Обученная на контрольных точках сети политики и их соответствующих траекториях, модель генерации демонстрирует замечательную универсальность и масштабируемость на нескольких задачах и имеет сильную способность к обобщению на невидимых задачах для вывода хорошо выполняемых политик с использованием всего лишь нескольких демонстраций в качестве входных данных.

Модель демонстрирует ее эффективность и результативность в различных областях и задачах, включая различные цели, поведение и даже между различными манипуляторами роботов.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🥸OpenVid-1M: крупномасштабный высококачественный набор данных для преобразования текста в видео

Генерация текста в видео (T2V) недавно привлекла значительное внимание благодаря большой мультимодальности модели Sora.

Однако генерация T2V по-прежнему сталкивается с важными проблемами.

Этот набор данных открытого сценария содержит более 1 миллиона пар текст-видео, что облегчает исследования по генерации T2V.

Обширные эксперименты и исследования абляции подтверждают превосходство OpenVid-1M над предыдущими наборами данных и эффективность нашего MVDiT.

🤗 Hugging Face
💾 Arxiv
📂 PDF

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🤖Создаем чат-бота техподдержки на русском языке с RAG из документации компании в OpenWebUI

В этой статье мы рассмотрим опыт создания чат-бота технической поддержки, который призван помогать отделу фронтлайна отвечать на вопросы пользователей.

Читать...

Читать полностью…

Data Science | Machinelearning [ru]

​​⚡️DG-Mesh: Построение высококачественных полигональных сеток из монокулярного видео

DG-Mesh реконструирует высококачественную динамическую 3D-сетку с согласованными вершинами из монокулярного видео.

В пайплайне используются 3D-гауссовы всплески для представления динамических сцен и дифференцируемые алгоритмы для построения полигонов.

DG-Mesh позволяет отслеживать движение вершин, упрощая текстурирование динамических объектов.

Метод эффективно использует память и полностью дифференцируем, что позволяет выполнять оптимизацию 3D-сетки целевого объекта напрямую.

🟡Страница проекта
🖥GitHub
🟡Arxiv

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🌟 Vico — реализация методики, которая позволяет добиться большей точности в генерации композиционных видео

Vico — это не требующий обучения фреймворк, который анализирует, как отдельные лексемы из входных токенов промпта влияют на генерируемое видео, и корректирует модель для предотвращения доминирования, учитывая все слова из промпта в равной степени.

Для этого Vico строит пространственно-временной граф внимания, при помощи которого оценивает и регулирует представление всех входных концепций в видео.

Vico может быть применен к множеству моделей для обогащения композиционной насыщенности и точности видео.

🖥GitHub
🟡Страница проекта
🟡Arxiv

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🌟 Semantic-SAM — универсальная модель сегментации и распознавания сложных объектов с высокой степенью детализации

Semantic-SAM — экспериментальный метод сегментации изображений, опирающийся на на Mask DINO, OpenSeeD, SEEM и VLPart, выполняющий интерактивную сегментацию с возможностью управления уровнем детализации и семантической осведомленностью.

🟡Arxiv
🖥Github
🟡Модели
🤗 Попробовать интерактивную демонстрация многоуровневой детализации
🤗 Попробовать авто-генерацию с контролируемой детализацией

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​⚡️ Test-Time Training RNN (ТТТ) - принципиально новый метод машинного обучения

TTT - это метод, который позволяет моделям искусственного интеллекта адаптироваться и учиться непосредственно во время использования, а не только во время предварительного обучения.

Основное преимущество TTT заключается в том, что он может эффективно обрабатывать длинные контексты (большие объемы входных данных) без значительного увеличения вычислительных затрат.

Исследователи провели эксперименты на различных наборах данных, включая книги, и обнаружили, что TTT часто превосходит традиционные методы.

🟡Arxiv
🖥GitHub for Pytorch
🖥GitHub for Jax

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

​​🌟 GeoWizard — новая модель для оценки 3D-параметров изображений

GeoWizard — генеративная модель, использующая алгоритмы построения гарт глубины и нормалей одновременно.

Во время логического вывода GeoWizard совместно генерирует высококачественные изображения глубины и нормальности, учитывая композицию изображения.

Модель использует алгоритм BiNI для восстановления 3D-сетки на основе предполагаемой карты нормалей, что значительно облегчит применение модели на методах 3D-реконструкции.

🟡Страничка GeoWizard
🖥GitHub [ Stars: 573 | Issues: 1 |Forks: 23 ]
🟡Hugging Face
🟡Arxiv

@Devsp — Подписаться

Читать полностью…

Data Science | Machinelearning [ru]

Конференция по машинному обучению

Собрали 30+ спикеров из Т-Банка, Яндекса, VK, MTS AI и AIRI. Будет:

— 4 параллельных потока: NLP & MLOps/LLMops, Research & RnD, CV & Speech, RecSys & TS;
— доклады и обсуждения реальных бизнес-задач;
— афтепати с барбекю и диджеем.

Turbo ML Conf пройдет 20 июля в Москве. Обязательно зарегистрируйтесь, пока за вас это не сделал бот.

erid:2VtzqvQdzeU
Реклама. АО "Тинькофф Банк", ИНН 7710140679, лицензия ЦБ РФ № 2673

Читать полностью…

Data Science | Machinelearning [ru]

​​🖥 Самые интересные публикации за последние дни:

• Как справиться с нехваткой открытых данных для обучения и тестирования ML-моделей

• ML-алгоритмы против хакеров: как поведенческая аналитика меняет правила игры в кибербезопасности

• Как быстро растут нейросети: прогресс Stable Diffusion за все время

• Lazy Diffusion — трансформер для редактирования изображений практически в реалтайме

Читать полностью…

Data Science | Machinelearning [ru]

​​🧐Как справиться с нехваткой открытых данных для обучения и тестирования ML-моделей

В этой статье делюсь особенностями разработанного решения и рассматриваю реализуемые им задачи.

Читать...

Читать полностью…
Subscribe to a channel