13183
Используем ИИ строго не по назначению. Заметки про ИИ, IT, компьютерные игры, и всякие инженерные интересности.
Так выглядит реалистичный Нью-Йорк в масштабе 1 к 1, созданный всего одним художником. По городу можно прокатиться на машине, а на дороге будет трафик и ремонтные работы.
Шедевр стал возможен благодаря новому набору инструментов CityBLD для Unreal Engine 5.
Такое будущее мы одобряем
Интересную работу выложили — открытый доступ. Идея в длительном, по меркам реального мира, обучении. Около 10 лет обучения в мире симуляции и около 10 дней на GPU вычислениях в нашем мире.
Идея очеловечивания и сопереживания обучающимся акторам, кажется мне, не совсем здоровой, но подумайте, изменится ли ваше отношение к персонажу, если вы будете знать, что он трудился, чтобы сделать свои первые шаги, очень много падал, вставал, снова повторял, учился держать тяжелый меч, бежал к цели, запинался об коллизию граунда, падал, запускал цикл достижения цели и отмечал у себя, что в тех координатах неровная поверхность и лучше ее преодолеть в следующий раз, перенеся вес немного назад, и так многие миллионы итераций.
И в такой концепции, когда вы жмете на контроллере стик вперед, вы не просто запускаете скриптованную анимацию бега, а говорите ему, куда ему стоит обратить свой взор и куда двигаться, а как он пойдет, зависит уже от множества факторов.
Это как управлять 10-летним глухонемым ребенком и вам решать, будете ли вы его беречь, ну или, наоборот, захотите раскрошить его в огне битвы, если вы бездушный ублюдок!👺
Сорс от жизнерадостного доктора
Уже попробовали SDXL 1.0?
Тогда возможно вам необходима новейшие исследование по тому, какие художники и стили есть внутри базовой модели?
Здесь энтузиаст собрал на сайт художников, материалы, объективы и пленку, которую можно использовать в новой модели в промте, не подключая чек-пойнты. Так что с помощью такой таблицы можно добиться не только реалистичных и качественных, но и красивых, художественных генераций.
Be careful when you ask for a catgirl with dragon wings
Читать полностью…
Молодежь генерит кримпаи: your mom won't be proud
Я генерю кримпаи:
Мир AI каверов летит со сверхсветовой, только и успевай находить ЗОЛОТО.
Вот, например набрел на эти шедевры:
- Uptown Funk в исполнении Heavy из Team Fortress 2
- Smooth Criminal в исполнении Шпиона из TF2
- Angel Thesis (тема из Evangelion) спета Фредди Меркури
- Эрик Картмэн поет Virtual Insanity (я даже представил как это реально могло бы быть гэгом из Саус парка)
Ну и конечно завершает это все GLaDOS - welcome to the internet, которая приглашает нас в этот замечательный интернет. Ведь если бы не интернет, где бы еще могло появиться столько безумных вещей 🍎 😮
https://youtube.com/watch?v=U-9IqXij9Xk&feature=share8
Warpsforce with wattew warpconaughey
Вау, оказывается есть магазин витрина коннекторов для LLM+ langchain/llama index.
Есть интеграции с Gmail/confluence/calendar и кучей источников данных!
GitHub
LlamaHub
И так, опять нейронки.
Кто же знал, что вся наша проф. деятельность будет настолько сильно трансформирована новым типом алгоритмов?
Interactive Neural Video Editing - решение для редактирования видео в реальном времени.
Рад, на самом деле, за композеров и AEшеров!
Я, когда говорю, что вся эта фиктивная деятельность по нажиманию кнопочек в софте - это не человеческое занятие, имея в виду именно то, что это не достойно звания человека, тонкой настройкой должен заниматься компьютер. Человек должен отвечать за творческий подход и новые идеи.
Кто был против, поднимите, пожалуйста, руки. Перед такой потенциальной перспективой автоматизации хотите и дальше заниматься ротоскопом и трекингом? Хотите продолжать покадрово замазывать тросы и козявки в носу? Что вы отстаиваете, зачем охраняете свое болото?
В конце ролика просто закройте глаза, чтобы не видеть финальный результат "творчества" ⛔️
Читать тут
Мне кажется, подписчики стали забывать, что этот канал - мои сохраненки на тему или и мемов 😸
Читать полностью…
Все текстуры в этом видео сгенерированы нейросетью 🔫
Разработали пайплайн с AI генератором текстур и материалов на базе СтейблДиффужена с контролнетом и Гудини😳
Такой сетап (со своими ограничениями в плане аккуратности) позволяет осмысленно, с учетом форм и нужных цветовых сочетаний генерировать тысячи уникальных текстур за пару минут, вместо ручной работы в течение месяца
Работает супер быстро, есть возможность обучения на своих стилях, паттернах, цветах. Ну просто рай
Вот реальный пример, как внедрение нейросетей в разы ускоряет продакшн. Скоро поделимся еще несколькими наработками, где уже помимо текстур будут и генеративные 3Д модели и более сложные, автоматизированные пайплайны
А если это все завернуть в веб-интерфейс и дать участникам инсталляций кастомизировать виртуальные сцены?
https://github.com/intel/openvino-ai-plugins-gimp
Читать полностью…
StabilityAI cofounder says CEO tricked him into selling stake for $100 (🔥 Score: 153+ in 3 hours)
Link: https://readhacker.news/s/5K5yF
Comments: https://readhacker.news/c/5K5yF
LORA for Kandinsky2.2, которая работает в бесплатном колабе!)
Читать полностью…
https://www.mtv.com/vma/vote/ vote Linkin Park - Lost for best rock (stablediffusion wapr\kaiber clip by sagansagansagans)
Читать полностью…
Это моя догадка, но почти уверен, что правильная.
В игре DotA 2 скоро должно выйти крупное обновление. К каждому обновлению выпускают, не поверите, список изменений, который игроки читают (или нет). Иногда изменений столько, что всего и не упомнить.
Так вот, сегодня выложили лог обновлений...но в эмодзи. Почти уверен, что его получили пропусканием текста оригинальных изменений через ChatGPT/GPT-4.
Ссылка (если шарите в теме - можете попробовать угадать!): https://www.dota2.com/newsentry/3674426239866314901
На скрине явно видно, что для скелета-лучника (Clinkz) поменяли таланты 10, 20 и 25ых уровней. А вторая строчка говорит об изменении времени перезарядки способности... SKELETON WALK (это буквально написано через эмоуты, хех)
👏
Figma запустила свой генератор картинок https://www.figma.com/community/plugin/1253173167259963280/AI-image-generator
Читать полностью…
Пока Nvidia готовит выступление на ближайшем SIGGRAPH по поводу нейронной компрессии, я вот что имею вам сказать.
Без сомнения, последнее время развитие в графике происходит не в чем-то принципиально новом, как когда-то в Doom3 придумали использовать нормали, а скорее в улучшении того, что уже было придумано, но на более низком уровне.
Если посмотреть на последние знаковые игры, которые используют быстрые SSD, например Ratchet & Clank Rift apart, то можно восхититься, если знать, как быстро там подгружаются данные при переходах между уровнями и какое количество FX и событий там удерживается на экране. Или те же наниты, по сути это трюки с геометрией, все той же полигональной.
Вот и у Nvidia трюк с теми же текстурами, принципиально они не меняются, но количество данных, которые они смогут содержать в себе при том же размере файла, подгружаемого в память, а иногда и меньше, просто поражает! Но это только с одной стороны.
Да, все будет выглядеть суперчетко, как в порно в 60fps и разрешении 4к, но стал ли такой формат популярен? У некоторых определенно да... больные ублюдки.
С другой стороны, дорогие художники, вы охуеете, все это текстурить! Теперь будут задрачивать так, что вы еще больше "полюбите" геймдев! Если раньше можно было сказать, у нас тексель не вывозит или в игре все равно пожмется даже на хайспеках, то сейчас это не прокатит, будьте добры, чтобы каждый пиксель звенел! И не важно, что это сессионый шутан, где все должно летать даже на пентиум 2. Потому что теперь то, что выглядело мылом и весило 3мб, сейчас весит столько же, а то и меньше, и видно каждую травинку.
В общем, просто потребителям ура, создателям контента лингам вам в руки!
Сорс
Pika Labs открылся для всех!
Генерить видео можно в ветках #generate как просто по тексту, так на основе картинки. Чтобы вкинуть изображение, нажимаете рядом с вбитым промтом на +1, затем жмёте на Upload и добавляете его.
Пример промта: /create prompt:a cat is walking in the forest, sunset, 4K -neg "bad anatomy, lowres" -ar 1:1Какие параметры у промтов:-gs xx (guidance scale, чем выше чифра, тем ближе визуал к промту)-neg "xxx" (негативный промт, задаём чего не должно быть в кадре)-hide (скрыть промт)-ar xx:xx (соотношение сторон, 16:9, 9:16, 1:1, 4:5)-seed xxx (ставим одно число для консистентной генерации, чтобы увидеть сид надо скачать видео он в названии файла)-motion xx (насколько подвижной нужна картинка, задаётся числами 0, 1, или 2)
Чтобы быстро генерить по тому же промту жмите значок "Повторить". Генерации ограничены 10 штуками в 5 минут.
Дискорд
Сайт
Помните я как-то писал про нейронку от Meta которая умеет генерировать музыку?
Нашел удобный colab с которым можно быстро генерировать музыку и где собраны все важные настройки (audio2audio, каскадные промпты, и тп и тд) – ссылка.
Просто нажимаете "Запустить" у ячейки и потом кликаете по ссылке в стиле x1x2x3x4x5..gradio.live
Генерация по запросу:
lo-fi balalaika
Так выглядит 11K-скан кадра «Оппенгеймера» Кристофера Нолана на 70-мм плёнке IMAX в формате 1:43:1. Один лишь этот кадр весит 500 МБ
r/#Damnthatsinteresting
Кайфовый варп от реддитора AthleteEducational63
Воркфлоу и гайды - reddit
Реддитор попросил sdxl сгенерить фото руки, трогающей беременную женщину, чтобы почувствовать, как толкается малыш.
В ответ получил немного wtf
Reddit
#чтивонаночь по быстрому
RLTF: Reinforcement Learning from Unit Test Feedback
Ну короче, yet another RL paper, толльок тут используются Unit test signal, те код комплиться, выполняется, на выходе три вида ответа: Error, F ailure или Pass, решаем или нет и кормим фидбек + ревард дискретный и бьет модель по бошке за любые ошибки что позволяет не скатываться в низкий ревард ловушку.
ну и бонусом это все выдает SOTA на MBPP(ну типа prompt - code - unit test)
paper
код
что ж, пришло время об этом рассказать: красиво стилизовать видео теперь можно не только в платном StableWarp но и бесплатном Deforum
и никакого фликера, даже напротив - еще более гладкая анимация. на видео сравнение двух техник при условно одинаковых настройках. магия работает в A1111 на ip2p контролнете и режиме hybrid video
узнал про этот трюк благодаря подписчику. спасибо, Михаил!
StableWarp по прежнему остается годным и очень крутым инструментом, но на мой личный взгляд - чрезмерно навороченным и чем дальше тем сложнее в нем разобраться, я уже не говорю про новых пользователей, у которых вскипает мозг при виде сотен настроек.
файл с настройками дефорума - в комментах
@тоже_моушн
🔥CM3leon - Новая универсальная генеративная модель для Картинок и текста
Ребята из Meta AI (FAIR) представили новую генеративную модель. Это по сути мультимодальная decoder-only LLM на базе архитектуры OPT, которая умеет работать как с изображениями, так и с текстом.
Для картинок используется предобученный токенизатор VQ-VAE, который разбивает 256x256 изображеие на 1024 токена из словаря размером в 8192.
Натренили модельку на 7 млрд параметров — CM3Leon-7B, которая хорошо генерит в 256x256 и выдает state-of-the-art FID = 4.8 на MS-COCO
Модель умеет:
1. text-to-image
2. image-to-text, то есть можно спрашивать любые вопросы по картинке
3. image-to-image с текстовой инструкцией
Одна генерация 256x256 занимает 9 сек в int8 (для сравнения авторегрессионная модель Parti-3В треубует 6.4 сек, но дает хуже качетсво).
Блог
Статья
@ai_newz
Ребята, там это, Гугловский #bard на русском выкатился: https://bard.google.com. Бесплатно, но нужен европейский ВПН. Так что не чатгпт единым. Пол дня переписываю простенькие тексты, вроде хорошо. Но призываю вас потестить и поделится свежими впечатлениями в хабе @AIMolodcaHub.
Читать полностью…
Теперь Midjourney показала «Гарри Поттера», если бы его снимал Гай Ричи
r/#midjourney