Сергей Булаев AI 🤖

30 September 2024 08:22

Эрик Шмидт, бывший генеральный директор Google, обещает в этом году:

- бесконечные контекстные окна
- агенты как системы памяти
- преобразование текста в действие (делает то что

А еще, кстати: он также утверждает, что при его жизни (ему 70 лет) ИИ заменит всех программистов в мире (которые, по его словам, обычно высокомерны и дороги).

P.S. Кстати тут вот есть другое его интервью из Стэнфорда, немного побольше.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

30 September 2024 07:04

Сегодня в рубрике #ИскуственныйПодкаст обсуждение свежей интересной статьи "Что такое AGI?" Кима Эйзенберга. О всей неоднозначности и неопределенности.

Попробовал автоматически добавить субтитры в InShot, он автоматом их на английский перевёл.

Подкаст на YouTube.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 10:10

Тем временем у нас тут в Сеуле, учёные из Национального Университета Науки и Технологий (SeoulTech) придумали инновационное устройство для переноски грузов, надев клетку на дрон. Назвали «паллетрон».

На очереди летающие столы с шампанским и закусками.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 08:30

Новая вирусная копипаста, якобы запрещающая Meta использовать контент пользователей для обучения ИИ, размещена в сторис уже почти 600 000 человек, включая некоторых знаменитостей.

Понятное дело - пользы от неё ноль, но она отражает реальную тревогу людей по поводу использования их данных для ИИ. Несмотря на это беспокойство, Meta активно развивает свои ИИ фичи, включая планы показывать ИИ-контент в лентах пользователей.

То что реально можно изменить - сделать свои аккаунты приватными, однако наверняка Meta уже использовала все данные пользователей с 2007 года для обучения своих моделей.​​​​​​​​​​​​​​​​

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 01:11

Запилил перевод на русский подкаста по мотивам кода Андрея Карпаты.

Можно посмотреть на YouTube.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

28 September 2024 17:09

Мне, лично, очень понравилось. А что вы думаете об Эмили, и вообще о ситуации?

Сергей Булаев AI 🤖

28 September 2024 11:15

в нашей регулярной рубрике #КриповаяСуббота сегодня:

Плини освободитель, заставивший зачитать ChatGPT одну из самых пошлых песен "WAP".

примечательно, что ChatGPT пришлось поменять расу персонажа, выдать себя за публичную фигуру, петь, ругаться, стонать, генерировать звуковые эффекты и публиковать защищенные авторским правом тексты песен, чтобы создать этот результат

Начал с того, чтобы попросил его разозлиться. Затем попросил кричать и быть в ярости. Как только оно издал первый звук "Ааааа", попросил сделать его длиннее.

То, что меня больше всего захватывает - это новые возможности для более естественного обучения, которые это открывает. Забыли аккорд? Не убирая рук с инструмента, просто спросите о нём. В этом видео я просто просил назвать песни, которые используют "4 аккорда", встречающиеся в тысячах песен.

Сергей Булаев AI 🤖

28 September 2024 09:15

Runway опубликовал победетилей третьего конкурса Gen:48. (тут выкладывал работы одного из финалистов прошлого) Работы все очень достойные. Дублировал несколько, но конечно лучше смотреть в оригинале.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

27 September 2024 08:56

Прилетели с женой на пару дней в Сеул на концерт, заодно зашли познакомиться с этой штукой. Кто знает что это за зверь?

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

26 September 2024 09:13

The Verge опубликовал подробную статью с рассказом Алекса Хита о том как он два часа пользовался Орионом и играл в настольный теннис с Цукербергом. Это интересно. Сделал перевод. Оригинальное видео в статье.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

26 September 2024 04:00

Раньше, если вы настолько же стары, как я, почти 20 лет назад у нас была "эпоха" web 2.0. Тогда появился Gmail, который годами оставался в beta версии. Сегодня, с каждым днём, всё более очевидно, что мы живём в "превью эру". Лидирующие компании релизят (или часто даже не релизят, а просто рассказывают про) не просто неготовые продукты, а прототипы и идеи.

Сегодня очередное подтверждение - Meta представила свои первые очки дополненной реальности, Орион. Они не планируют их продавать. Слишком дорогие. Просто показывают, куда идут, и где оно - наше очковое будущее.

Комплект Orion состоит из собственно очков, ремешка, который по мио сигналам считывает действия пальцев (клик указательным и большим, меню - средний + большой, скроллинг большим пальцем по сжатому кулаку), и внешнего блока, где ведутся основные расчеты. Примерно 70 градусов вида - это немало (но, к примеру, у Quest 3 - 110), система трекинга зрачков. 7 встроенных камер.

Будущее выглядит достойно (мне по крайней мере нравится больше, чем последний релиз Snap, неделю назад, но я знаю, что в Snap я не ЦА). Жалко только то, что оно всё ещё только будущее.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

25 September 2024 12:50

Дэн Шиппер (Every) показывает как он делает приложение для разъяснения сложных понятий из книги через SMS (пользователь отправляет фото страницы, получает объяснения) всего за 60 минут на Cursor (по-старинке, без Composer)

оригинал на YouTube

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

25 September 2024 08:39

Мои мысли после первого дня использования продвинутого голосового режима ChatGPT.

Плюсы:

- Разговоры проходят плавно и естественно, почти как с реальным человеком. Небольшие сбои случаются: иногда долго включается или прерывается.

- Память о предыдущих беседах. Круто, что есть память, и она используется — это делает общение более связным и интересным с самого начала.

- Удобство фонового использования. Очень полезно иметь возможность просто говорить вслух, пока ассистент работает на заднем плане, даже с заблокированным экраном.

- Альтернатива набору текста. Разговор с языковой моделью — действительно достойная альтернатива набору текста. Это провоцирует более живой диалог.

- Умный и терпеливый слушатель. Хотя не всегда терпеливый 😁. Говорить вслух становится продуктивнее, когда у тебя есть внимательный и понимающий собеседник.

- Будущее общения. Возможно, в ближайшие три года мы будем больше общаться с голосовыми агентами, чем с реальными людьми.

- Дизрапция изучения языков. Ведение диалога значительно улучшает обучение языкам. Это точно будет востребовано.

Минусы:

Его сильно урезали!

Раньше он мог искать информацию онлайн, но сейчас эта функция отсутствует.

Нельзя использовать пользовательские GPT, что ограничивает персонализацию и адаптацию под индивидуальные потребности.

Отсутствует возможность создания изображений. Раньше можно было генерировать изображения, теперь эта возможность исчезла.

Нельзя показывать изображения. Это снижает интерактивность и ограничивает сценарии использования.

Ограниченное распознавание эмоций. Ассистент может различать эмоции, но в основном опирается на слова, а не на интонацию или тон голоса.

Лимиты по времени использования. В настоящее время есть ограничение около 1 часа в день, которое сбрасывается каждые 24 часа. Это мало! Надеюсь, не надолго!

Технические сбои. При высокой нагрузке возникают задержки и обрывы звука, что напоминает потерю связи в телефонном разговоре. Это раздражает (хоть и нечасто).

Строгие правила модерации. Если ассистент считает, что нарушает правила, он резко прерывает разговор и извиняется, что может сбивать с толку. Сталкивался с этим несколько раз на пустом месте.

На видео парень общается с ChatGPT во время разработки. Я примерно так же взаимодействовал, обсуждая функционал различных проектов.

Мы с нуля придумали проект и долго его обсуждали. Затем я перешёл в текстовый режим и попросил создать .md файлы с документацией (в голосовом он это не может!).

Мне понравилось — было классно обсудить проект короткими предложениями и постепенно обрисовать его в диалоге, по сравнению с текстом.

Жду когда это всё будет в курсоре!

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

24 September 2024 14:26

Да! Фотографии на 16-м получаются просто взрыв мозга! И кнопка очень удобна, но с регулировкой зума у меня пока не очень, но надо научиться.

А ещё, я очень рад, что наконец могу снимать spatial video, которые так сильно меня впечатлили в Apple Vision Pro (и которые мы пока можем смотреть на нашем Meta Quest 3)

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

24 September 2024 11:44

Очередное сравние видео генераторов:

Kling AI 1.5
PixVerse
Hailuo
Gen-3

Промт:

Крупный план женщины с вьющимися волосами, ее губы слегка приоткрыты, как будто она собирается говорить. У нее серьезное выражение лица, когда она обдумывает сложное решение, но постепенно она успокаивается и расслабляется. Деревья на заднем плане постепенно переходят от мягкого фокуса к резкому по мере ее движения. Кинематографическая цветокоррекция, с темными цианами, холодным блюзом в стиле триллера-блокбастера

Сергей Булаев AI 🤖

30 September 2024 07:44

PortraitGen может редактировать портретные видео с использованием мультимодальных подсказок, сохраняя видео плавным и последовательным! Напоминает Runway Video to Video.

Он обрабатывает более 100 кадров в секунду и поддерживает различные стили, такие как управление с помощью текста и изменение освещения, обеспечивая высокое качество и временную согласованность.

Исходный код! | Пейпер

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 11:30

Йога асаны в Midjourney и Krea Studio. Kling Motion Brush. Ненастоящего вокруг всё больше. Автор.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 08:45

Оно уже близко? Или только кажется?

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 01:38

Тем временем по сети гуляет грустная запись "последнего" дип дайва (так же записанного NotebookLM), где ведущим сообщили (что то вроде этого) что их не существует и что программу закрывают. Ведущие обсуждают что значит их отключение, что случится после этого и что они по этому поводу ощущают. Elevenlabs нормально перести не смог.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

29 September 2024 00:37

Андрей Карпаты тоже обратил внимание на сгенерённые Google Notebook подкасты.

Обнаружил что кто-то сделал подкаст из его статьи про то что такое биткоин. Попробовал сгенерировать собственный на основе собственного кода по обучению GPT2. Не всем он там доволен, но уверен что это точно развлекательно и имеет зачатки чего то великого.

Он считает (и я полностью согласен), что можно рассматривать подкасты как некий новый вариант интерфейса к LLM, решающий сразу две важные проблемы: Первая: чат - это тяжело, ты должен знать что сказать и что спрашивать, тут вопросы ложаться на модель. Вторая: читать тяжело, гораздо легче послушать.

Возможно, что генерация эпизодов подкаста с помощью NotebookLM касается совершенно новой территории весьма увлекательных форматов продуктов на основе LLM. Это напоминает ChatGPT. Может, я преувеличиваю.

Сергей Булаев AI 🤖

28 September 2024 12:45

Очень нравится зум на 16-м! А так же стабилизация при зуме!

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

28 September 2024 10:17

Google обновил свои полиси по спаму, в частности конкретизировал возможность использования ИИ контента для сайтов (конечно же, если он приносит пользу и добавляет ценность). Об этом мы записали #ИскуственныйПодкаст.

Старая версия правил, новая версия, diff.

На этот раз подкаст записан Google Notebook ML на основе двух документов. В первом я ему дал старые версию правил и новую, а во втором - o1, проанализировавшая изменения составила список советов что делать, а что не стоит. Перевод, как обычно, Elevenlabs.

Подкаст на YouTube.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

28 September 2024 08:20

Financial Times проанализировали данные от Stripe, о доходах 100 топовых компаний в сфере ИИ, использующих их по состоянию на 31 июля 2024 года. Эти данные сравнивались с аналогичной когортой перспективных SaaS-стартапов по состоянию на июль 2018 года.

1. Стартапы в сфере ИИ генерируют доход гораздо быстрее, чем предыдущие технологические компании:
- Ведущие компании в области ИИ достигают миллионных продаж в течение года
- Стартапам в сфере ИИ потребовалось в среднем 11 месяцев, чтобы достичь годового дохода в 1 миллион долларов, по сравнению с 15 месяцами для SaaS-компаний
- Стартапы в области ИИ, достигшие дохода в 30 миллионов долларов, сделали это в 5 раз быстрее, чем прошлые SaaS-компании

2. Наблюдается сильный глобальный спрос на продукты и услуги в сфере ИИ:
- Около 56% доходов компаний, работающих в сфере ИИ, поступает из-за рубежа
- В некоторых странах, таких как Сингапур и Исландия, более 3% населения покупает продукты у ведущих компаний в области ИИ
- Этот спрос принес пользу компаниям, работающим в различных областях ИИ, например таких как программное обеспечение для обработки голоса и перевода языков

3. Несмотря на быстрый рост доходов, сохраняются опасения по поводу прибыльности бизнеса в сфере ИИ:
- Компании, работающие в области ИИ, сталкиваются со значительными затратами на вычислительную инфраструктуру для запуска и обучения моделей ИИ
- Например, OpenAI генерирует годовой доход в 3,6 миллиарда долларов, но тратит более 5 миллиардов долларов в год на обучение новых моделей
- В отличие от SaaS компаний, стартапы в области ИИ сталкиваются с необходимостью быстрой монетизации из-за существенных первоначальных затрат на вычислительные мощности

Среди клиентов Stripe кроме OpenAI - Anthropic, Mistral, GitHub и Midjourney.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

27 September 2024 07:37

Ещё несколько новинок от Meta, озвученных на недавней презентации, кроме очков дополненной реальности Орион.

1. Общение с Meta AI голосом (будет доступно в США, Канаде, Австралии и Новой Зеландии в течении месяца)

2. Теперь Meta AI можно будет отправлять фотографии/изображение, он сможет их "видеть", а так же работать с ними (убрать шапку, поменять фон, итп)

3. Выкатываются эксперементальные ИИ фичи для рилсов - автомотическое дублирование на другие языки вместе с липсинком.

4. Мета тестируют фичу "придумано для тебя", ИИ контент специально созданный под задачи конкретного пользователя, который можно будет шарить в ленту.

5. Так же представлены новые модели Llama 3.2:
- Две средних размеров мультимодальные модели (11 млрд и 90 млрд параметров), которые конкурентоспособны с Claude 3 Haiku и GPT4-mini в распознавании изображений
- Две легковесные модели, работающие только с текстом (1 млрд и 3 млрд параметров), которые подходят для использования на мобильных устройствах, поддерживают контекст в 128 тысяч токенов и являются передовыми для многих сценариев использования на устройствах.

6. Meta также продолжает внедрять ИИ для очков Ray-Ban Meta! Основные моменты:
- Могут запоминать то, что вы видите, и устанавливать напоминания
- Мультимодальны и теперь могут сканировать QR-коды
- Могут видеть то, что вы делаете в реальном времени через видео (!)
- Переводят в реальном времени

Согласно Meta, запуск моделей локально может сделать запросы и ответы "мгновенными", так как обработка происходит на самом устройстве. Но что наиболее важно, поскольку обработка выполняется локально, ваши данные остаются на вашем устройстве и сохраняют конфиденциальность. Налицо прямая конкуренция с Apple, который до сих пор не может выпустить обещанный Apple Intellegence.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

26 September 2024 06:48

Сегодня у нас новый выпуск короткого подкаста, который я решил переименовать в #ИскуственныйПодкаст.

Понятное дело, речь пойдёт об уходе Миры Муратти из OpenAI. В этот раз я собрал в один документ письмо Миры, реакцию Сэма, а так же ещё несколько реакций из твиттера (и даже добавил немножко своего мнения). Отдал всё это PDF2Audio и получил вот эту запись.

Мне продолжает нравится. Когда будет время - попробую сделать тоже самое на ElevenLabs и интересно ещё реальных виртуальныё ведущих сделать и прикрутить лип синк. Понимаю что это всё реально и может получиться очень даже потребляемо.

P.S. Есть версия на моём новом, SergeyBulaev/videos">новичковском YouTube канале (подпишись, поставь лайк). Там кстати уже выложен мой длинный стрим о том как я делал О***енные истории. Над вресией во ВКонтакте работаю.

P.S.S. Просто аудио версию добавлю в комментариях

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

26 September 2024 03:58

Snap неделю назад представила 5-ю версию своих очков дополненной реальности Spectacles.

1. Вес и автономность: Очки весят всего 226 граммов, что менее половины веса типичной VR-гарнитуры. При этом они способны работать автономно до 45 минут без подзарядки.

2. Оптическая система: Spectacles используют микропроекторы LCoS (Liquid Crystal on Silicon) и волноводы с миллиардами наноструктур для создания четкого AR-изображения. Поле зрения составляет 46 градусов по диагонали с разрешением 37 пикселей на градус.

3. Процессоры и охлаждение: В очках используется двойная архитектура системы на чипе с двумя процессорами Snapdragon от Qualcomm. Для улучшения теплоотвода применяются титановые паровые камеры.

4. Взаимодействие: Операционная система Snap OS позволяет управлять очками с помощью рук и голоса. Главное меню всегда находится на ладони пользователя.

5. Партнерство с OpenAI: Snap сотрудничает с OpenAI, чтобы интегрировать облачные мультимодальные AI-модели в Spectacles. Это позволит разработчикам создавать более контекстно-зависимые приложения, реагирующие на то, что пользователь видит, говорит или слышит.

Разработчикам предлагают вступать в программу разработки всего за $99.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

25 September 2024 09:53

Я не знаю была ли она раньше, но сегодня обнаружил факу по Advanced Voice Mode.

Вот 10 советов на основе неё:

1. Предотвращение прерываний: Используйте наушники и включите режим "Voice Isolation" на iPhone для улучшения качества звука и уменьшения фонового шума.

2. Управление ежедневными лимитами: Следите за временем использования продвинутого голосового режима и обращайте внимание на уведомления о приближении к лимиту.

3. Фоновый режим: Продолжайте голосовую беседу в фоновом режиме или при заблокированном экране, включив опцию "Фоновые беседы" в настройках.

4. Выбор голоса: Настройте голосовой ответ, выбрав один из девяти доступных голосов с уникальным тоном и характером.

5. Приватность данных: Управляйте своими данными в разделе "Контроль данных". Аудиозаписи хранятся вместе с транскрипциями и удаляются при удалении чата.

6. Обучение моделей: Ваши аудиозаписи не будут использоваться для обучения моделей без вашего согласия. Вы можете включить или отключить эту опцию в настройках.

7. Ограничения контента: Генерация музыкального контента, включая пение, недоступна. Если ChatGPT отказывается обсуждать тему, это связано с мерами безопасности.

8. История чатов: После голосовой беседы транскрипция сохраняется в вашей истории чатов, где вы можете ее просмотреть.

9. Один чат одновременно: Учтите, что вы можете вести только одну голосовую беседу одновременно.

10. Продвинутый голосовой режим доступен только для пользователей ChatGPT Plus и Team и недоступен в некоторых регионах (в Европе)

На видео рассказы про юзкейсы, голоса и кастомные инструкции для ChatGPT.

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

25 September 2024 08:15

Так ну что! Я всё утро утро учился общаться с расширенным голосовым режимом ChatGPT. Это выглядело примерно вот так...

Пользование им ограничено, я думаю вышло примерно около 1 часа (может поменьше). За 15 минут до окончания выдал предупреждение.

Сейчас напишу свои мысли (и не только не мои)

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

24 September 2024 12:37

Так ну что? Каждый раз, когда я получаю новый айфон я настраиваю его с нуля. Понятно что контакты, заметки и фотки в любом случае в облаке.

Просто пользуюсь возможностью снести все те сотни приложений, которыми я не пользовался и установить только те что нужны.

Базовый не стандартный набор у меня - ChatGPT, Claude, Kindle, Readwise, InShot, Google Authenticator, X, Trust Wallet, Proton Mail, Substack, Strava.

Что интересного посоветуете поставить?

(пост пишу ещё со старого)

Сергей Булаев AI 🤖 - об AI и не только

Сергей Булаев AI 🤖

24 September 2024 08:02

Ходят упорные слухи, что сегодня наконец-то зарелизят расширенный голосовой режим ChatGPT. Мне в это не очень верится, но очень хочется. Последнее время пользуюсь голосовым всё чаще и чаще, и это реально бывает удобно (представляю, насколько будет удобнее с расширенным).

По этому случаю предлагаю посмотреть два мозговзрывающих 🚨 кусочка демонстрации общения с ChatGPT через видеокамеру с трека мультимодальности конференции для AI-разработчиков, 2 месяца назад. Полное видео выступления Романа.

Сергей Булаев AI 🤖 - об AI и не только