13183
Используем ИИ строго не по назначению. Заметки про ИИ, IT, компьютерные игры, и всякие инженерные интересности.
Запустили с командой новый продукт LittleStory:
AI-генератор длинных и (относительно) интересных сказок для детей.
Пользователь регистрируется, добавляет на сайт описание ребенка (характер, возраст) и получает возможность с пары кликов сгенерировать историю и иллюстрации, где сам ребенок — главный герой, а сказка строится вокруг какой-то позитивной темы — здорового питания, хорошего поведения или простым языком рассказывается сложный научный концепт, аля квантовая физика для самых маленьких.
Из прикольного — можно прописать любимую вселенную для сказки, игровую, книжную или из мультика. Ну и само собой каждая генерация тщательно проверяется на «безопасность темы» для детей.
Все работает на GPT4, поэтому бесплатно дать генерации пока что не можем — но зато мы нагенерировали сотни бесплатных сказок на разные темы, можно почитать и оценить качество.
Уже сейчас есть шесть языков (Английский, Хинди, Русский, Традиционный Китайский, Украинский, Голландский) и скоро доведем до 11+, еще планируем фичи вроде озвучки сказок или копирования голоса родителя для чтения этих самых сказок (небольшое вложение в SciFi от нашей команды ☕️).
Это первый запуск нашей команды на Product Hunt, так что если у вас есть аккаунт, буду рад фидбеку там (комменты не на английском там удаляют 👍):
https://www.producthunt.com/posts/littlestory-io
Сайт проекта:
https://littlestory.io
(если мы ничего не сломали — а мы могли, то сразу откроется правильный язык)
P.S. Когда-нибудь расскажу как мы намучились с другими языками и gpt4 как переводчиком и с промптами размером с девятиэташку
P.P.S. Если вдруг решите поддержать проект и попробовать, то вот промо-код на 10% скидку при первой покупке WELCOME10
Когда я был маленьким и смотрел суперстарые серии Doraemon, я увидел там ножницы, которыми главные герои вырезали из журналов разные предметы, и они становились настоящими. Потом, в период пубертата, я мечтал, чтобы такими же ножницами можно было бы вырезать с главной обложки Playboy или Maxim🏳
Сейчас схожие такой же магии чувства.
В общем, это больше похоже на концепт: кубы работают как баундинбоксы и пивоты, генерация натренирована на усреднённую форму предмета, и качество предмета зависит от его популярности в интернете. А хочется, чтобы генерация действительно учитывала разную степень проработки изначального блокаута и доделывала его в зависимости от запроса.
То, что показали в Rodin Gen-1, не textToimg, а именно textTo3D, и он, без сомнения, будет использоваться в продакшене рано или поздно. Не в этой инкарнации, так в другой.
Сорс
Еще одна занятная новость с CES: это демка Nvidia ACE, в которой показывают в уже известном окружении разговор двух NPC, умеющих управляться с языковыми моделями.
Каждый раз их разговор не похож на предыдущий. И убер-фишка: это то, что можно взаимодействовать с NPC голосом, почти без задержки, это тянет на успех.
Рамки взаимодействия для ИИ становятся шире, и продолжат это делать до тех пор, пока они не получат полную свободу самовыражения в игровых мирах.
Оригинал
Там заанонсили кроссовер-ивент в Apex Legends в честь релиза очередного ремастера Final Fantasy VII.
Если вы не успели проорать со скина Aerith, то самое время.
Asian Gamedev vs Woke Gamedev, как говорится.
Постеры, кстати, сгенерены ИИ поверх 3д, что вызвало очередное бурление среди художников.
@derplearning
UEVR: На Quest3 выходят 11000 игр на движке UE4/5
Шок видео скачать без смс и регистрации!!!11один
(на самом деле нет)
Пока мы все находились в анабиозе\путешествовали во времени с 25 декабря по 7 января,
в опенсорс выкатили тулзу, позволяющую попытаться запускать любые игры на Unreal Engine 4/5 в VR.
Понятное дело, что ожидать VR-механик из коробки не стоит, но глянуть на привычные игры в настоящем 3д очень даже хочется.
Да, много игорей глючит, не запусается вообще, а VAC или любой другой античит вас сразу забанит. Не стоит забывать, с первого релиза не прошло и месяца, так что скрестим пальчики и будем посмотреть!
На видео - GTA SA. Признайтесь, всегда хотелось услышать "Ah shiet, here we go again", угнать байк, follow the damn train, и охладить трахание именно от первого лица, а не вот это вот все.
Гитхаб
Таблица совместимости игр
Доки
Дискорд Flat2VR
@derplearning
Потатошка.
Жаль, что при добавлении Элли пса попердолело.
Милота дня!
Штоето? Kittenpillat? Пусеница? Гусенок?
source
Бесплатные облачные кредиты для стартапов
Многие из нас что-то пилят (или как говорят в Долине we are builders). Одно дело делать блокнотик в колабе, и совсем другое запускать что-то в продакшен. Для этого нужны деньги.
К счастью, у больших организаций типа AWS, Microsoft, NVidia и Google есть программы для стартапов, в которых они дают бесплатные облачные кредиты для реализации ваших идей.
Мне удалось получить их все, без официальной регистрации компании
Формы заявки довольно простые для заполнения:
AWS Activate - $1000+
NVidia Inception - $10000+
Microsoft for Startups -$1000+
Google for Startups - $2000+
Попадание в каждую из этих программ дает множество дополнительных плюшек, типа бесплатных кредитов на Notion, Miro, Assana, Vercel и тд
Happy building!
В х-иттере вирусится пост про прохождение верификации из r/stablediffusion.
И пока твиты набирают миллионы просмотров, оригинальные посты на реддите уже потерты модераторами.
До прохождения видео верификации навскидку даю ещё ну где-то полгода 😅🥲
Последний пост автора на реддите с воркфлоу (в комментах схороню скрин с ним на всякий)
@derplearning
Кулибины из Stanford University x DeepMind из говна и палок собрали робота за $32k
Он управляется нейросеткой с ноутбука с GPU 3070TI и способен обучаться сложным задачам всего за 50 демонстраций. «Демонстрацией» тут называется последовательность действий, осуществляемая человеком со специальными контроллерами в руках (см. тут и на видео). Авторы тестировали робота на многих задачах, и в целом в более чем 50% случаев у него всё получается после шага обучения «подражанию» людям.
Делает ну буквально всё: готовит, заправляет стиралку, подметает, заправляет подушку в наволочку, протирает мебель... был бы у меня такой робот — я б может и не женился 🍷
Инструкция «собери сам» доступна тут, в основе лежат покупные робо-детали и распечатанные на 3D-принтере компоненты.
Больше демок: тут, тут, тут и тут. Тем, кто досмотрит приложенное видео до конца — бонус с нарезкой людей фейлов бота при готовке. Тут платформой управляет человек (пока), то есть происходит та самая демонстрация.
———————————
Начинаем 2024й год в AI с хороших новостей для сотрудников фастфуда☕️
Мой любимый формат загадки – в видео ниже:
🏬 – ставьте домики если считаете что это реальное видео
🪿 – ставьте гуся если считаете, что это компьютерная графика
Результаты подведем завтра ☕️
AnyText: Multilingual Visual Text Generation And Editing
Ну що, с наступающим?
Alibaba, очевидно, не дают покоя лавры dalle3 в части генерации всратого текста, поэтому они выкатили свою вариацию LDM, заточенную на генерацию текста с картинками.
Назвать этот пайплайн "генераций картинок с текстом" язык не поворачивается :D Также поддерживает добавление текста на картинку, его редактирование и, как следствие, удаление вотермарков
Диффузная модель теоретически совместима со stablediffusion, так что скоро и все привычные свистоперделки можно будет подключить.
Го кидать сгенеренные открытки в комменты, я создал!
Git (apache 2.0)
Demo (если вы китаец :D)
Paper
@derplearning
Немножко странного на ночь.
Нейронка сгенерила людей, которых арестовывает полиция за ношение огромных ботинок.
в конце прошлого года мы делали предположения про что будет год следующий. много кто считал что после картинок - на очереди конечно же видео и 3д.
и видео сетки за год действительно проделали лихой путь от ультра криповых (один, два) до вполне артовых (один, два) и довольно реалистичных результатов (один, два, три, четыре). конечно со своими нейро-артефактами которые с каждой новой моделью выглядят все более естественно и все меньше бросаются в глаза
с 3д дело обстоит куда сложнее. уже есть неплохие решения (один, два, три, четыре) но все равно в основном шляпа на выходе
внезапно к концу года оказалось что если усилия 3д и видео моделей объединить - можно получить ну очень качественный псевдо 3д результат. не могу перестать удивляться - иллюзия работает почти идеально.
запускается это дело конечно же в ComfyUI. воркфлоу положу в комменты. там же дополнительные прикольные результаты
это видео от разработчика расширения IP-Adapter для комфи - обязательно к просмотру. чел сооружает похожий сетап и крутит девушку в 3д, сохраняя примерно ее внешность. вообще канал этого парня для меня настоящий исайт, уровень полезной информации зашкаливает
гайд о возможностях StableZero123 от Оливио
гайд от Матео Latent Vision
страничка воркфлоу в дискорде banodoco
всех с наступающим и пусть следующий год будет лучше чем этот! всем лучи добра
@тоже_моушн
[пост был удалён]
Вихрь - семейство русификацированных моделей (flan т5 240м, flan т5 3В, mistral 7B) как основы.
Все имеют адаптированный под русский токенйазер, подучены на хабре, а т5 ещё и на переведенной open orca.
Все модели учились с дистиляционным лоссом, те просадка относительно оригиной модели минимальная, но деньги кончились и инструкт версию для mistral мы не доделали, возможно позже.
По метрикам ВОЗМОЖНО лучше чем закрытые модели Яндекса и Сбера, но точными цифрами сложно оперировать, я не уверен в русских бенчах, а saiga sbs руки не дошли поставить.
Возможно позже.
Sentence версия т5 не полетела, энкодер от flan сопоставим с энкодером Fred T5 xl.
Если у вас есть архитектура где используется flant5 xl и хочется поддерживать русский - можно смело подсунуть этот флан. Встанет как влитой.
Подробности в статье на хабре на следующей неделе.
Huggingface
Релизнули с @nadlskom @den4ikresearch(ft flan на saiga, выйдет позже)
КрасивоеMicrosoft Light Simulator
A* (A Star) pathfinding algorithm visualized on the city streets of Chicago and Rome.
Data from OpenStreetMap, OSMnx - intersections of streets represented as nodes and streets as edges
Tools used for visualization - Python, Blender
youtube
Сразу несколько новостей от Nvidia.
Во-первых, анонсировали новые карточки серии Super. Готовьтесь, что в ретейле будет дороже. Карты появятся в продаже 17 января.
- RTX 4070 Super – $599
- RTX 4070 Ti Super – $799
- RTX 4080 Super – $999
Хорошо что не 5я серия, потому что я не умею так быстро копить деньги на новые карточки.
Во-вторых, подготовили под это пару ремастеров, типа HL2, Morrowind и Portal. Выход 22 января. С помощью утилиты RTX Remix добавили новые материалы, текстуры и рейтрейсинг и DLSS 3.5.
В марте добавят рейтрейсинг в Diablo4.
Презентация тут
Microsoft added
192.168.1.0 and 192.168.1.1
To their DNS records, lol
Just in case you had some weird issues somewhere before new year 👀
https://news.ycombinator.com/item?id=38702783
Shoe cleaning company: makes a customer support chatbot via ChatGPT
Jailbreaking users:
Когда забыл картошку в ящике на полгода
@derplearning
Civit.ai вводит пейволл - Clubs
Собсно, то, чего боялись после ввода их внутриигровой валюты Buzz, свершилось.
В ближайшее время на платформе появится местный аналог patreon. Обещают, в принципе, все то же самое - подписки с тирами за Buzz.
За пейволл можно прятать все типы контента, то есть модели, Лоры, картинки и их настройки, посты. Родной генератор картинок платные модели без подписки потрогать тоже не даст.
Обещают и возможность "пробных" версий одного и того же контента: недообученные модели, менее подробная мета для генераций.
С одной стороны это, конечно, прекрасно - создатели контента для взрослых, коих там субъективно 99%, наконец смогут выйти из своих подвалов и купить еды. С другой - манчкины, скрейпившие терабайтами контент, легко заменят сайт одним торрентом.
К тому же валюту buzz нельзя вывести с платформы, а можно потратить собсно на подписки, чаевые, и генерации картинок. (надеюсь, потом исправят)
Отдельно встаёт юридический и моральный вопрос, так как данные для моделей и лор вряд ли были собраны с соблюдением всех лицензий. Пока это было для всех даром - вопросов было мало. Как только в этом появятся деньги - появятся и вопросы, а, может, и первые робкие иски.
В общем, будем посмотреть. Один скандал с генерацией цп у них недавно был, реддит уже полыхает, поэтому приготовим попкорн для следующих скандалов и будем надеяться, что это не будет для них юнити-моментом.
UPD: они уже немного дали заднюю и завели тред с обсуждением возможных вариантов монетизации
reddit срач
анонс clubs
faq clubs
обсуждение монетизации
@derplearning
Paranoid Pandemonium
Психоделический таймлапс создания не менее психоделического полотнища. 2 недели времени и 6000+ инпейнтов.
сорс
Какой на самом деле саундтрек играл в демо-видосе из этого поста
Ну что, кто уже заказал все запчасти для DIY-сборки, скачал клип известной группы, и с нетерпением ждет возможности обучить эту несчастную железку по-настоящему социально полезным навыкам? :D
Три минуты худших способов изменения громкости.
Потому что почему бы и нет.
@derplearning
Новогоднее поздравление сына маминой подруги.
Будьте собой.
Мы живем не во вселенной Altered Cabron Carbon, и все люди, к счастью, смертны.
(кекаю с этой пасты)
НАСТОЯЩИЙ МАТЕРИАЛ (ИНФОРМАЦИЯ) ПРОИЗВЕДЕН, РАСПРОСТРАНЕН И (ИЛИ) НАПРАВЛЕН ИНОСТРАННЫМ АГЕНТОМ (НАИМЕНОВАНИЕ, ФАМИЛИЯ, ИМЯ ОТЧЕСТВО (ПРИ НАЛИЧИИ), СОДЕРЖАЩАЯСЯ В РЕЕСТР ИНОСТРАННЫХ АГЕНТОВ) ЛИБО КАСАЕТСЯ ДЕЯТЕЛЬНОСТИ ИНОСТРАННОГО АГЕНТА (НАИМЕНОВАНИЕ, ФАМИЛИЯ, ИМЯ, ОТЧЕСТВО (ПРИ НАЛИЧИИ), СОДЕРЖАЩАЯСЯ В РЕЕСТР ИНОСТРАННЫХ АГЕНТОВ)
https://www.youtube.com/watch?v=0DgX9136eKc
MonadGPT is a chatbot trained on 11,000 early modern texts in English, French, and Latin — up to the 17th century.
Chat now: https://huggingface.co/spaces/Pclanglais/MonadGPT
Я всегда любил маленькие умные модели. Не очень сложно на большом масштабе получить хорошие результаты, а вот на маленьком - сложно.
Чуваки сделали 1.3b(mini llama based) в стиле llava модель, которая почти не уступает (3 цифра после запятой) 7b llava.
Hf
Spacetime Gaussian Feature Splatting for Real-Time Dynamic View Synthesis
Собственно, позволяет в реальном времени рендерить видео-нерфы на основе видео с нескольких камер.
Сама оптимизация, конечно, не риалтайм, но рендер заявлен в 60 фпс на 4090 @ 8k
Когда уже увидим воксельные игры с таким подходом к рендеру?
Git (MIT)
Подробнее
Демки
Ютуб
@derplearning
