2047
личный канал про ИИ
Всем привет!
Встречайте десятый выпуск еженедельного подкаста "Капитанский мостик", в котором обсуждаем новости из мира ИИ за прошедшую неделю и не только. Ведущие выпуска - Дмитрий Колодезев и Валентин Малых. Приглашенный участник выпуска - Александра Мурзина.
Смотрите видео на каналах ⤵️
ODS VK Video
ODS YouTube
📩 Присылайте новости для обсуждения в канал "Дата-капитаны" в mattermost (авторизуйтесь через ODS.ai).
пишут, что Alibaba разработала свой AI-чип; само по себе это неудивительно, в конце концов, Google, Amazon и OpenAI это уже сделали; но тут интересно, что якобы чип от Alibaba совместим с CUDA; это довольно сильно, многие захотят такую "китайскую подделку"
если это правда, интересно, как урегулированы права на интеллектуальную собственность; подозреваю, что nVIDIA со стороны китайских властей сделали предложение, от которого нельзя было отказаться
кстати, напомню, что китайская компания Moore Threads уже выпускала карту, совместимую с CUDA
@valuableai
в Южной Корее правительство предоставляет кукол Hyodol (Хёдоль) одиноким пенсионерам; кукла умеет разговаривать с помощью ChatGPT; говорят, что это чтобы предотвратить самоубийства среди пенсионеров; надеюсь, что поможет, но есть опасения, т.к. недавно были новости, что ChatGPT наоборот кого-то наводит на мысли о самоубийстве
тут стоит напомнить, что Южная Корея - страна с самым низким в мире коэффициентом рождаемости, поэтому там одиноких пенсионеров много и становится все больше
цените личное общение, это - настоящая роскошь в современном мире
@valuableai
в общем-то ожидаемо, коллеги из широкой коллаборации университетов представили aiXiv, arXiv с интегрированными агентами; структура платформы на картинке; из забавного - сразу встроенная защита от промт-инъекций; Sakana AI выпустили своего AI Scientist всего полгода назад (интересно, что коллеги его зафоркали себе), а уже создается инфраструктура под такие статьи; на мой взгляд такой шаг очень ожидаемый, OpenReview фактически уже был готов к внедрению агентов, но тут решили сделать отдельно; для меня открытый вопрос - где будут брать железо и кто за него будет платить
в общем, отчет (даже скорее презентация) тут; готовый код тут; самого сайта еще нет, можно податься в формочку для листа ожидания
@valuableai
как говорится, любопытство сгубило кошку
забыл, откуда утащил картинку
@valuableai
товарищи, то, о чем столько лет говорили большевики, произошло: GitHub запретил сгенерированные CoPilot описания пулл-реквестов; я немного преувеличиваю, конечно, но к этому все шло; люди не готовы читать сгенерированные описания, т.к. их банально слишком много
забавно, что на той неделе пришла еще и вторая новость в эту же сторону: Miсrosoft добавила возможность отключать подсказки от CoPilot в VisualStudio
на мой взгляд, вывод из обеих новостей простой - все хорошо в меру, слишком активная "помощь" от ИИ скорее вредит, чем помогает
@valuableai
пока я был в отпуске, вышла интересная статья про рассуждения; авторы попробовали посмотреть на рассуждения с точки зрения нескольких простых атрибутов - длины (в токенах и по количеству шагов рассуждения), формата и самой задачи; начнем с последнего (первая картинка), т.к. оно самое непонятное; идея в том, чтобы взять базовые трансформации и просить модель воспроизводить их некоторую комбинацию; длина, я думаю, очевидна из названия; а формат - это стандартная атака на LLM в виде убирания/добавления токена и т.п.
в статье демонстрируется, что модели не устойчивы ни по одному из заявленных параметров; неустойчивость к атакам демонстрировали уже давно, обобщаемость на новые задачи также ожидаемо отсутствует, но на длину рассуждения была надежда; однако же нет (вторая картинка): если изначально учить модель на два шага рассуждений, то она не умеет делать рассуждения в один шаг, а если ее этому учить, то разучивается делать двухшаговые
QED: модели отступать от выученных шаблонов не приспособлены
@valuableai
дошли руки выложить мое выступление на True Tech Day
@valuableai
Claude 4 теперь может обрабатывать до 1 миллиона входных токенов; вообще это не есть что-то удивительное, например, у Gemini такое было год назад; nVIDIA ведет специальный репозиторий под характерным названием "линейка" для таких сравнений; у них там даже есть специальная колонка "эффективная длина контекста" для отличения от заявленной; как говорится, на словах ты - Лев Толстой, а на деле не то, что "Войну и мир", а скромный рассказик не напишешь
Claude пока линейкой не померяли, так что ждем
@valuableai
хочу поделиться статьей, которая меня удивила - я не думал, что в 2025 году кто-то всерьез продолжает заниматься контекстно-независимыми векторными представлениями слов (типа word2vec); однако реальность всегда богаче наших фантазий, и группа Кристофера Мэннинга выпустила статью про обновленный GloVe
для оценивания, к примеру, они используют тот же WordSim353, как 10 лет назад; тут нужно оговориться, что каждый инструмент хорош для своих задач и для быстрой классификации, например, тот же fasttext все также отлично работает; но все равно, как на машине времени проехался
@valuableai
вроде бы не замеченная в желтизне Wall Street Journal пишет (даю ссылку на РБК, т.к. в WSJ - пейвол), что люди в Силиконовой долине отдают по 50 тысяч долларов за то, чтобы выбрать наиболее подходящий эмбрион для беременности - тот, у которого потенциально будет наивысший IQ; оправдывают это тем, что человечеству нужно защищаться от ИИ
мне это напоминает Гаттаку и "О дивный новый мир", первое - это отличное кино, а по второму сняли недавно сериал, книга того стоит, сериал я не смотрел; суть обоих произведений как раз сводится к евгенике (выведению лучшего в физиологическом смысле подвида человека); правда, в обоих же произведениях не упомянут ИИ, но на мой взгляд он и в этот раз за уши притянут
@valuableai
я так и не понял, то ли это комплимент, то ли оскорбление
@valuableai
только вчера говорили о профанации человеческого общения, а тут новости из США: в штате Теннеси 15-летнюю девочку (девушку?) арестовали из-за того, что она написала ерунду в школьном чате; если бы эту ерунду написал взрослый мужчина, то я бы сказал, что его арестовали по делу, но для подростка говорить ерунду нормально, это повод для беседы с родителями или с директором школы, но уж не для ареста; повторю еще раз мысль, что ИИ может взять на себя типичную задачу - например, поиск оскорблений в переписке, но принимать решение об интерпретации этих действий должен человек
@valuableai
как говорится, не можешь победить - возглавь; общеизвестно, что студенты и школьники используют ChatGPT для того, чтобы делать домашнее задание, OpenAI решил с этим не бороться (все-таки это тоже потребители), а найти соломоново решение - теперь ChatGPT будет помогать студентам учиться (видео); чтобы не было, как в тот раз; к слову, количество запросов к ChatGPT упало втрое после того, как школьники ушли на каникулы (картинка)
@valuableai
всем привет, сегодня шестой выпуск подкаста "Капитанский мостик", он как обычно посвящен важным новостям прошедшей недели; в этот раз мы снова были втроем, я, Дмитрий Колодезев и Алексей Натекин; видео тут:
VK Video
YouTube
присылайте новости для обсуждения в канал "Дата-капитаны" в mattermost (авторизуйтесь через ODS.ai)
@valuableai
Claude интегрировали в MAX! а вы говорите - технологическое отставание
утащил из рабочего чатика, за картинку спасибо Даниле
@valuableai
мои любимые новости из разряда "два мира - два Шапиро", как многие помнят, Трамп хотел поувольнять федеральных чиновников и заменить их ИИ; в то же время у нас создают систему планирования для промышленности с использованием ИИ
на мой взгляд, и то и другое в какой-то мере неизбежно: государство - тоже организация, которая может действовать более эффективно при использовании ИИ; в ОАЭ уже пишут законы с его помощью, к примеру; но вопрос на мой взгляд в том, как осуществлять переход - как Трамп, когда взмахом пера целые учреждения распускаются, или - постепенно, когда ИИ позволяет выполнять больше работы, без увеличения штата сотрудников
@valuableai
моя любимая рубрика "два мира - два Шапиро":
- у нас Яндекс получил штраф от ФСБ за непредоставление доступа к Алисе;
- у них OpenAI уже хранит все чаты без срока давности, а теперь будет их проверять на наличие чего-то противозаконного, и если что-то обнаруживается, сразу сообщать в полицию
вывод предлагаю сделать самостоятельно; однако же, субботняя шутка перестает быть шуткой
@valuableai
Сегодня девятый выпуск подкаста "Капитанский мостик". Традиционно выпуск ведем мы с Дмитрием Колодезевым. В этот раз мы пригласили Ивана Комарова.
Смотрите видео на каналах ⤵️
ODS VK Video
ODS YouTube
Также мы стали выкладывать все выпуски на подкастные площадки:
Zvuk
Яндекс.Музыка
Apple Podcasts
YouTube Music
Castbox
VK Музыка
Саундстрим
Deezer
Подписывайтесь и слушайте нас, где вам удобно.
📩 Присылайте новости для обсуждения в канал "Дата-капитаны" в mattermost (авторизуйтесь через ODS.ai).
@valuableai
почти подряд пришло две новости:
1) Microsoft выпустила сеть для генерации голоса VibeVoice; она позволяет генерировать аудио длиной до 90 минут с 4 участниками; и это моделькой, размером в 1.5B; я попробовал генерировать русский, сильный американский акцент слышно и периодически захлебывается, явно на русский не рассчитано, хотя на странице есть пример с китайским
2) OpenAI буквально сегодня ночью выпустила Realtime API для генерации голоса при общении с ChatGPT, кстати, поддерживает SIP
@valuableai
я эту тему как-то пропустил, хотя началась она еще 10 лет назад, тема эта - электронные татуировки (как на первой картинке), кому что, а мне вспоминается Cyberpunk 2077 (вторая картинка, не так много отличий, правда?); всплыла она в связи с тем, что про нее опять вспомнил Билл Гейтс; причем не просто вспомнил, а заявил, что они заменят смартфоны; мы не так давно обсуждали замену смартфона от Rabbit, iyO; на мой взгляд, такая замена выглядит даже более перспективной, только мне непонятно, как тут происходит вывод информации: у Rabbit есть экранчик, у iyO - динамик, а тут? обещают не имплантировать никаких чипов, только сами чернила; не очень понятно, как происходит ввод, но допустим, оно сможет считывать колебания кожи от звука голоса, а вот вывод я себе не могу представить
@valuableai
недавно говорили про евгенику в Калифорнии и вот подоспел ответ из-за океана (Тихого): китайские ученые разработали искусственную матку, в 2017 году эта группа продемонстрировала донашивание ягненка; а в следующем году они обещают уже такой аппарат доступный для всех желающих - всего за миллион рублей (100 тысяч юаней); будущее уже здесь, такие дела
@valuableai
к слову о библеистике и языковых моделях
@valuableai
спасибо моему подписчику, который попросил разобрать статью про Hierarchical Reasoning Model; на мой взгляд - это очередная попытка переизобрести рекуррентные нейронные сети; берется два трансформерных блока, один из которых работает все время, а другой - только изредка; на первой картинке графическое представление, на второй - упрощенный код
такой подход позволяет при минимуме весов показать хорошие результаты на ARC и других логических задачах (третья картинка); про время исполнения по сравнению с текущими моделями не пишут, что интересно
@valuableai
в последнее время только ленивый не написал про то, что Интернет погибает, например, вот BBC; они разгоняют панику по поводу ИИ-саммари по запросу от Google; раньше уже были жалобы на ChatGPT, что они съедают поисковый трафик, и еще StackOverflow жаловались на снижение посещаемости; особо смешно последнее, т.к. трафик SO стал падать задолго до появления ChatGPT
на мой взгляд идет нормальный естественный отбор: ресурс - человеческое внимание, ограниченное 24 часами в сутки - конечен, его потребителей расплодилось очень много, выживет сильнейший; мы, как пользователи, скорее всего и не заметим пропажи проигравших
@valuableai
всем привет, сегодня седьмой выпуск подкаста "Капитанский мостик", он как обычно посвящен важным новостям прошедшей недели; мы снова были втроем, я, Дмитрий Колодезев и Алексей Натекин; видео тут:
VK Video
YouTube
присылайте новости для обсуждения в канал "Дата-капитаны" в mattermost (авторизуйтесь через ODS.ai)
@valuableai
Finantial Times пишет, что выход DeepSeek R2 задерживается из-за проблем с Huawei Ascend; насколько это правда, это отдельный вопрос, но из этой новости мы узнаем, что DeepSeek действительно тренируют на Ascend, раньше были только слухи; повторю, что именно это - серьезный вызов монополии nVIDIA; остальные игроки - также американские, к слову - Intel и AMD, пока ничего близкого по уровню не представили
@valuableai
в Британии один местный депутат сделал себе чатбота, который общается с людьми вместо него - как там сказано, чтобы люди могли высказать пожелания, узнать что-то и т.п.; на мой взгляд, это профанация из разряда ИИ-проповеди, кстати, инновация родом из Германии
это повод поговорить о замене человека чатботом; на мой взгляд это оправдано, когда есть поток однотипных вопросов, но важно, что нетипичные вопросы обрабатывает человек; если же исключается возможность работы человека по нетипичным вопросам, то коммуникация становится невозможной, я считаю, это большой ошибкой для любой организации, что коммерческой, что политической, что тем более религиозной
@valuableai
коллеги порекомендовали аналог Overleaf только для MarkDown - коллаборативный редактор, коммерческий, бесплатно для маленьких команд (3 человека), но, как и у Overleaf, у него есть community версия; уже существует 8 лет, а я только на днях узнал
@valuableai
вайб-кодер растет
картинку утащил с Хабра
@valuableai