Исследователи AIRI и МТУСИ разработали ИИ-модель для определения синтетических голосов, которые используют телефонные мошенники ⤵️
Системы голосовой биометрии могут быть уязвимы к состязательным атакам, когда определенным образом настроенное небольшое изменение входного аудио приводит к значительному изменению результатов работы модели. В 2021 году появилась надёжная ИИ-модель AASIST для защиты от подмены голоса, но в наши дни её функционала уже недостаточно.
Команда «Доверенные и безопасные интеллектуальные системы» AIRI и команда НИО «Интеллектуальные решения» МТУСИ при участии аспиранта Сколтеха усовершенствовали её, разработав архитектуру AASIST3.
Применение сети Колмогорова-Арнольда (KAN), дополнительных слоев и предварительного обучения, лучшего feature extractor, а также специальных обучающих функций, позволило улучшить производительность модели более чем в два раза по сравнению с базовым решением. Кроме того, созданная модель продемонстрировала лучшую обобщающую способность к новым видам атак.
Научная статья была представлена на конференции "Interspeech 2024", а также вошла в топ-10 лучших решений международного соревнования ASVspoof 2024 Challenge 🏆
🔖Подробнее про исследование читайте в материале ТАСС.
Зачем искусственный интеллект обучают играть в игры — в колонке для РБК Трендов ⤵
Кандидат физико-математических наук, директор лаборатории Cognitive AI Systems AIRI Александр Панов рассказывает про то, как исследователи используют игры, чтобы обучать системы искусственного интеллекта решать реальные задачи.
📎Читайте материал по ссылке.
В новой статье на Хабре рассказываем про метод редактирования реальных изображений с помощью диффузионных моделей ⤵
Совсем недавно исследователи из группы «Контролируемый генеративный ИИ» лаборатории FusionBrain AIRI выложили препринт статьи, которую представят на конференции ECCV этой осенью. В нем предложен метод редактирования реальных изображений с помощью диффузионных моделей, который достигает лучшего среди всех методов компромисса между качеством редактирования и сохранением структуры исходного изображения.
📎Делимся ссылкой на demo на Hugging Face, где вы можете протестировать метод на своих изображениях. Подробнее про исследование также можно прочитать в канале руководителя группы Айбека Аланова.
Научная статья | GitHub
С началом осени возобновляем #AIRISeminars и продолжаем второй сезон научных семинаров по ИИ, которые проходят каждые две недели по средам ⤵️
Подробности и регистрация на офлайн-формат семинара, который пройдет 11 сентября в 17:00, по ссылке. Онлайн-формат — в трансляции на YouTube, а также в группе VK.
До встречи!
Завершилась третья летняя школа по искусственному интеллекту для молодых ученых «Лето с AIRI» 🔥
Спасибо всем 80 участникам из 13 регионов России, которые за 10 дней посетили больше 45 лекций и семинаров, поучаствовали в постерной сессии и защитили 25 исследовательских проектов.
Благодарим Лабораторию искусственного интеллекта Сбера за поддержку Школы в этом году.
Поздравляем всех с началом учебного года! 😁
Провели воркшоп на конференции ACL-2024, которая прошла в Бангкоке📌
Воркшоп TextGraphs-17 был организован PhD, руководителем группы «Вычислительная семантика» Александром Панченко, доктором компьютерных наук, руководителем группы «Прикладное NLP» Еленой Тутубалиной, научным сотрудником Михаилом Сальниковым и исследователем Sber AI Андреем Саховским совместно с коллективом коллег из других научных организаций.
На воркшопе выступали докладчики из MIT, Университета Амстердама, IBM и других организаций. Тема комбинирования LLM с графами знаний стала основной, но результаты воркшопа показали, что она далека от решения. Воркшоп привлек большой интерес — даже в 9 утра в аудитории не хватило стульев 💡
Также в рамках воркшопа исследователи AIRI провели соревнование вопросно-ответных систем, которому посвящена одна из статей в сборнике.
Делимся сборником статей и фотографиями с воркшопа и постерной сессии📎
Какие направления в ИИ самые крутые? Что почитать и кого послушать, чтобы получить самую достоверную информацию из этой сферы? Вместе с экспертами летней школы по искусственному интеллекту для молодых ученых «Лето с AIRI» сделали для вас карточки, которые помогут найти ответы на эти вопросы
#IT
Поздравляем Сборную России с победой в Международной олимпиаде по ИИ (IOAI) в Болгарии🔥
Команда показала лучший результат в научном туре олимпиады, завоевала золотые медали, а также получила серебро в практическом этапе и стала первой по сумме баллов за оба этапа конкурса.
Поздравляем стажера–исследователя лаборатории FusionBrain AIRI Андрея Громыко, выпускника школы «Летово» Андрея Грицаева, победительницу Всероссийской научно-практической конференции «Старт в инновации» 2024 Анастасию Гайнуллину и призера Всероссийской олимпиады школьников по информатике 2024 Никиту Курлаева.
Сегодня все сердца поста — команде победителей❤
Исследователи SberDevices, AIRI, МФТИ и Ecom.tech разработали бенчмарк LIBRA для оценки моделей на длинном контексте для русского языка 🔥
Бенчмарк включает 21 задачу, которые разделены на четыре группы по сложности, и позволяет оценивать LLM на различных длинах контекстов — от 4 тыс. до 128 тыс. токенов.
Команда AGI NLP в SberDevices рассказала все подробности исследования в статье на Хабре — читайте по ссылке.
Научная статья | GitHub | Hugging Face
Сотрудники лаборатории «Сильный ИИ в медицине» AIRI показали, что слепое использование ИИ-методов без грамотного учёта неопределенности моделей может привести к ошибочным оценкам возраста ⤵
Исследование с критикой так называемых эпигенетических часов старения для измерения омоложения клеток в процессе клеточного репрограммирования было недавно опубликовано в журнале Aging Cell.
🔖Все подробности — в новой статье научного сотрудника AIRI Дмитрия Крюкова на нашем Хабре.
Сегодня делимся подборкой недавних активностей с исследователями AIRI ⤵
📎Кандидат технических наук, директор лаборатории FusionBrain, AIRI Андрей Кузнецов в выпуске про тренды в ИИ, будущее и возможности современных технологий на канале ОСНОВА.
📎Колонка кандидата физико-математических наук, научного сотрудника AIRI Юрия Куратова для РБК.Тренды про то, как устроена память нейросетей.
📎Запись трансляции СV-шницы про исследования в области компьютерного зрения, которая прошла на прошлой неделе.
📎Интервью Евгения Фролова, PhD, руководителя группы «Технологии персонализации» AIRI, для Коммерсантъ про фреймворк, который повышает точность рекомендательных систем.
Больше интересного — в нашем блоге на сайте📌
Сегодня рассказываем про новый фреймворк StyleFeatureEditor⤵
Исследователи из группы «Контролируемый генеративный ИИ» лаборатории FusionBrain AIRI представили фреймворк, который позволяет быстро редактировать фотографии, сохраняя качество реконструкции и хорошую редактируемость результата. Научная статья принята на ведущую конференцию по компьютерному зрению CVPR-2024.
📎Все подробности — в новой статье на Хабре, а пробовать демо нового метода уже можно на HuggingFace.
Прямо сейчас мы с коллегами на ICML 2024. В этом году международная конференция по машинному обучению проходит в Вене, Австрия.
Конференция гигантская — минимум 7000 участников, русскоговорящих тоже много, больше 200 человек. На площадке много студентов, бывших и нынешних — человек 30 точно есть. Компаний тоже много, их основная цель на конфе — это хайринг.
ICML стала знаковым networking event-ом. Меня знают, несколько товарищей в первый день организовали личные встречи из совершенно разных стран. Статьи читают, работать вместе хотят. До Вены успеваешь добежать только вечером, увы, но там обычно тоже networking events. Какие — писать не буду, но приглашения ищут все :) По существу докладов надо будет переработать и осознать, это будет потом. Интересные идеи есть — это радует.
В этот раз под постерную сессию выделен огромный зал. Самих постеров такое количество, что за 1,5 часа все посмотреть нереально, но я пытаюсь :)
Успел заглянуть к руководителю группы «Адаптивные агенты» AIRI Владу Куренкову, который рассказывает про постер своей команды.
Лето — это период студенческих практик в нашем офисе, рассказываем подробнее ⤵
В рамках научного партнерства студенты МТУСИ прошли производственную практику в группе «Доверенные и безопасные интеллектуальные системы», руководителем которой является кандидат физико-математических наук Олег Рогов.
Прочитать про проекты, которыми занимались практиканты, можно по ссылке📎
#практика_в_AIRI
В этом году вы побили все рекорды, подав 941 заявку на «Лето с AIRI»⚡️
В связи с этим нам нужно чуть больше времени на определение 80-ти финалистов. Результаты отбора придут к вам на почту 22 июля до 16:00. Если письмо вам не пришло, то рекомендуем проверить папку «спам» или написать нам на event@airi.net
После окончания школы все лекции будут размещены на канале AIRI. Подписывайтесь!
Открыт приём заявок на публикацию в специальном номере научного журнала Journal of Biomedical Informatics (Q1) про новые подходы и приложения к применению мультимодальных больших языковых моделей в биомедицине 💡
В подготовке выпуска примет участие доктор компьютерных наук, руководитель группы «Прикладное NLP» Елена Тутубалина в качестве члена научного комитета.
Подать заявку можно до 1 февраля 2025 года. Подробности и инструкции — на сайте журнала.
Всем удачи с подачей заявки!
Исследователи AIRI проанализировали взаимодействие между 189 языками, охватив около 5 тысяч языковых пар 🌐
При участии коллег из Сколтеха исследователи определили «супердоноров» и «суперреципиентов» — языки, которые наиболее эффективно передают или усваивают знания.
Цель исследования заключалась в проверке гипотезы о том, что дообучение моделей на многоресурсных языках может улучшить качество обработки малоресурсных.
Было рассмотрено 158 многоресурсных и 31 малоресурсный языки. Вопреки ожиданиям, английский не вошел в число лучших доноров. Ими стали африкаанс, словенский, литовский и французский, а среди языков-реципиентов выделились гуарани и коптский. Статья была представлена на конференции ACL 2024 в Таиланде.
Научная статья | Материал в Хайтек
В рамках создания отраслевого клуба по ИИ в машиностроении мы подписали соглашение о сотрудничестве с KAMAZ Digital ⤵
Альянс в сфере ИИ и KAMAZ Digital анонсировали создание клуба по искусственному интеллекту в машиностроении. В рамках подготовки к работе клуба уже были заключены первые партнерства, включая наше соглашение.
Предложение о создании нового отраслевого клуба было озвучено на дизайн-сессии «GenAI в инжиниринге и промышленном дизайне», организованной ключевыми производственными компаниями страны при поддержке Сбера и Альянса в сфере ИИ.
Участникам клуба предстоит решить задачу создания условий для ускоренного проникновения ИИ в процессы разработки сложных изделий, а также приблизить разработки больших технологических компаний к полезному применению ИИ в работе.
Рады начать совместную работу! 😁
На связи рубрика #хакатоны 🔔
Открылся приём заявок на онлайн-соревнование AI Journey Contest 2024. В этом году от AIRI сразу 3 задачи:
⚫️Emotional FusionBrain 4.0: создание мультимодальных моделей работы с видео, аудио и текстом.
⚫️Multiagent AI: создание мультиагентной RL-системы, агенты которой смогут решать задачи, объединяясь в различные схемы кооперации.
⚫️Embodied AI: создание роботов, которые смогут решать сложные задачи, требующие взаимодействия с окружающей средой и пользователем, а также общения с ними на естественном языке.
Призовой фонд соревнования составит 8,5 млн рублей 🎁
Задачи уже ждут вас на платформе DS Works, решения принимают до 28 октября.
Про штатный минимум, аутсорс и собеседования новых сотрудников — в колонке для Forbes ⤵
Руководитель научной группы «Пространственный интеллект» Института AIRI Антон Конушин разбирает, какая экспертиза критична для разработки ИИ-продукта в стартапе.
📎Читайте материал по ссылке.
Сегодня мы совместно с ПИШ ИТМО запустили третью летнюю школу по искусственному интеллекту «Лето с AIRI» 2024 💡
80 участников из более чем 10 регионов приехали в Санкт-Петербург, чтобы провести 10 дней с ведущими учеными из AIRI, ИТМО, МФТИ, ВШЭ, Сколтеха, Лаборатории искусственного интеллекта Сбера и других авторитетных научно-исследовательских организаций и вузов.
Участники Школы уже начали знакомиться друг с другом, слушать лекции по шести направлениям и придумывать идеи для проектов. Будем делиться интересным в канале и рассказывать про то, как проходит программа.
В 2024 году партнером Школы стала Лаборатория искусственного интеллекта Сбера.
Рады объявить Школу официально открытой! Все лекции будут опубликованы в VK и на YouTube😁
Прямо сейчас в Бангкоке проходит конференция ACL-2024📌
В этом году исследователи AIRI представляют сразу несколько докладов и участвуют в воркшопах.
Делимся статьями, которые были представлены в основные дни конференции:
◼️Your transformer is secretly linear
Ученые лаборатории FusionBrain AIRI вместе с коллегами из Сколтеха и Sber AI обнаружили, что преобразование эмбеддингов в большей части слоёв в трансформерах-декодерах на 99% имеет линейный характер. Подробнее про исследование мы рассказывали в недавнем посте.
◼️Fact-Checking the Output of Large Language Models via Token-Level Uncertainty Quantification
Команда исследователей из нескольких российских институтов и Катарского научно-исследовательского института вычислительной техники представила новый пайплайн для проверки фактов и обнаружения галлюцинаций больших языковых моделей, основанный на количественной оценке неопределенности на уровне токенов.
◼️TaxoLLaMA: WordNet-based Model for Solving Multiple Lexical Semantic Tasks
Исследователи AIRI, ВШЭ, Сколтеха и Гамбургского университета разработали модель для задач, связанных с таксономией, TaxoLLaMA, которая позволяет извлекать лексико-семантические знания из базы данных WordNet.
◼️MERA: A Comprehensive LLM Evaluation in Russian
Ученые AIRI с коллегами из SaluteDevices, ВШЭ и Центра технологий искусственного интеллекта представили открытый коллаборативный бенчмарк MERA для оценки больших языковых моделей.
Завтра на конференции начинаются воркшопы, расскажем про них подробнее и поделимся фотографиями в следующем посте 😁
С 26 по 28 августа на ФКН ВШЭ пройдёт летняя школа по машинному обучению в биоинформатике, рассказываем подробности ⤵️
В течение трёх дней участников ждут лекции и семинары ведущих специалистов. От AIRI в этом году выступят спикеры из группы «Бионформатика» и лаборатории «Сильный ИИ в медицине»: Дмитрий Пензар, Дмитрий Умеренков, Татьяна Шашкова и Алексей Шмелев.
На школе будут рассмотрены следующие темы:
⚫️наше прошлое, зашифрованное в геномах
⚫️применение больших языковых моделей в геномике
⚫️биоинформатика и персональные ДНК-тесты
⚫️генеративные модели в белковом дизайне
⚫️вычислительное предсказание эффектов мутаций
⚫️использование белковой языковой модели для поиска B-клеточных эпитопов.
📌Участие бесплатное, регистрация на школу по ссылке.
Уже завтра стартует основная часть конференции IJCAI 2024 в Южной Корее📌
Делимся фотографиями и рассказываем, какие статьи исследователей AIRI представлены в этом году:
◼️Probabilistically Robust Watermarking of Neural Networks
Исследователи AIRI из группы «Доверенные и безопасные интеллектуальные системы» вместе с коллегами из ИСП РАН и Сколтеха разработали новый подход к созданию водяных знаков для моделей машинного обучения, который демонстрирует устойчивость к атакам, направленным на кражу функциональности, в особенности к тем, которые используют дистилляцию знаний. Исследование представлено в формате статьи и устного доклада на главном треке конференции.
◼️Do You Remember the Future? Weak-to-Strong Generalization in 3D Object Detection
Авторы AIRI из научной группы «ИИ в промышленности» вместе с исследователями из ВШЭ и ИСП РАН продемонстрировали новый метод обнаружения 3D-объектов с помощью лидара, решающий проблемы разреженности и окклюзии.
◼️Plug-and-Play Unsupervised Fault Detection and Diagnosis for Complex Industrial Monitoring
В статье исследователей AIRI и коллег из AI Talent Hub, ИТМО и ВШЭ представлен инновационный подход к обнаружению и диагностике неисправностей без учителя, адаптированный для мониторинга промышленных химических процессов.
◼️AADMIP: Adversarial Attacks and Defenses Modeling in Industrial Processes
Исследователи AIRI совместно с коллегами из ИСП РАН и МФТИ представили систему, которая может помочь оценить устойчивость моделей диагностики технологических процессов к состязательным атакам.
◼️SensorSCAN: Self-supervised learning and deep clustering for fault diagnosis in chemical processes (journal track 7)
В данной статье исследователи AIRI вместе с коллегами из ВШЭ предлагают новый метод обнаружения неисправностей и диагностики без контроля, предназначенный для мониторинга промышленных химических процессов. Статья опубликована в ведущем журнале "Artificial Intelligence" и приглашена к презентации в рамках journal track на конференции.
Подробную программу конференции можно найти на сайте😊
Исследователи из команды «Адаптивные агенты» AIRI при участии лаборатории T-Bank AI Research собрали датасет XLand-100B для обучения ИИ самостоятельному принятию решений 🌐
Самый большой open-source датасет для Reinforcement Learning уже доступен для всех ученых и разработчиков и насчитывает 100 миллиардов кортежей — фиксированных наборов данных.
Он может пригодиться не только для создания ИИ-систем, которые будет гораздо проще настраивать для решения новых задач без вовлечения узкопрофильных специалистов, но и стать источником полезных синтетических данных.
🔖Подробнее про исследование читайте в новом Хабре научного сотрудника AIRI Александра Никулина, а также в материале ТАСС Наука.
Научная статья | GitHub | Канал команды
Исследователи AIRI совместно с коллегами из T-Bank AI Research разработали первую в мире модель в области контекстного обучения, которая умеет самостоятельно обучаться новым действиям всего на нескольких примерах 🌐
Модель Headless-AD способна к выполнению любой комбинации и любого количества действий, при этом она сохраняет качество их выполнения и не затрачивает дополнительные вычислительные ресурсы. Среди потенциальных сценариев применения модели — создание персональных роботов — помощников по дому и адаптация беспилотного автомобиля к работе после замены детали.
📎Подробное описание модели и результаты экспериментов доступны в статье In-Context Reinforcement Learning for Variable Action Spaces. Код можно найти на GitHub.
Результаты исследования были представлены на конференции ICML 2024.
Сообщение для тех, кто подал заявку на «Лето с AIRI» 🔔
Благодарим вас за терпение и вовлеченность. Научный комитет усердно работает, тщательно изучая и отбирая каждую заявку.
Результаты отбора на летнюю школу придут к вам на почту в среду 24 июля до 12:00📌
CV-шница пройдет уже в этот четверг! 🍳
Делимся подробным расписанием онлайн-митапа:
▪️15:30
Вступление — Артур Кадурин, руководитель группы «Глубокое обучение в науках о жизни», AIRI
▪️15:35
3D генерация по тексту/изображению — Антон Конушин, кандидат физико-математических наук, руководитель группы «Пространственный интеллект», AIRI
▪️ 15:55
Kandisnky Flash: генеративно-состязательный подход к дистилляции диффузионных моделей — Владимир Архипкин, руководитель направления по исследованию данных, Sber AI
▪️ 16:15
Мультимодальные модели и способы эффективного представления визуального контекста — Андрей Кузнецов, кандидат технических наук, директор лаборатории FusionBrain, AIRI
▪️16:35
Генерация изображений по активности мозга — Абдуллин Ильгиз, AI Talent Hub, и Щетинников Константин, Quality Analyst Intern, Wildberries
▪️16:55
Ensemble-Based Image Annotation for Real-Time Human Detection
— Игорь Попов, Computer Vision Engineer, AI Talent Hub
Сохраняйте ссылку на трансляцию, чтобы не пропустить доклады 👾