те кто вечно возмущается из-за отсутствия консистентности в анимации с помощью SD - мне интересно, когда вы скажете что уже ок?
video by Glenn Marshall
@тоже_моушн
Даня Шеповалов – легендарный колумнист журнала “Хакер”. В его канале “Вечерний Даня” постоянно льется всякая дичь: от героев олдовых игр в 2023 году до бомб с магнитным порошком против роботов. Бывают даже гуси, заряженные на криптоанархизм. Все, что помогает выжить в мире победившего киберпанка. Стоит подписаться: @vecherniy_danya
Читать полностью…ВЫШЕЛ ВЫШЕЛ ВЫШЕЛ!!!!
Редактор поз для OpenPose прямо внутри A1111
Github
Twitter
ʟᴀᴛᴇɴᴛ ꜱᴘᴀᴄᴇ
стрим - в 22:00 по Еревану. ссылку пришлю сюда ближе к началу
тема: ControlNet - как работают разные режимы, какие и для чего нужны, заодно покажу некоторые лайфхаки и приемы
эту прекрасную кучку говна я посвящаю тем новым подписчикам, которые не понимают зачем попали на этот канал и пришли ставить пальцы вниз и писать глупые или токсичные комментарии.
я ценю ваше мнение, но прежде чем его писать подумайте - нужно ли его знать другим?
каждое ваше грубое высказывание или реакция какашки 💩 больно ранит мое нежное сердечко 💔 и уменьшает желание делиться новым и интересным
если вы здесь с добрыми намерениями и так же кайфуете от дикого темпа прогресса нейросетей - нам по пути 🤝, добро пожаловать!
если вы луддит 🚫 и токсик 💣 - поищите кнопку "покинуть канал" 🚪
peace!
хроники ControlNet: новый эксперимент от Гленна Маршалла. подробностей он не открывает но похоже что это режим canny и batch обработка картинок - а значит ControlNet можно использовать для более качественной стилизации по сравнению с img2img
пост в твиттере
@тоже_моушн
взял за правило - вставать в вейтлисты всех перспективных эйай проектов, и вам советую)
сегодня наконец то получил доступ к Text to Skybox! давно искал что то подобное - генерация 360 панорам по всем правилам. шов еще слегка заметен, но это правится в ручном режиме за пару минут
покрутить мои тесты в 360 можно тут
по этой ссылке записываемся в вейтлист
твиттер проекта
upd: в комменты можете прислать свои промпты, попробую их сгенерить в панораму
@тоже_моушн
такс, ну это уже ни в какие ворота! скоро приделают официально и можно будет ручками настраивать позу персонажа в аутоматике. о времена!
пост в твиттере
в комменты загляни, там еще скелеты припрятаны)
@тоже_моушн
воооо, как раз было интересно как будет вести себя генерация по позе в движении. конечно же психодел и мельтешение, даже при фиксированном сиде. но что то в этом есть. может у меня нейрозависимость и профдеформация но с каждым днем становится все привычнее наблюдать подобные нейро-артефакты
UPD. сходите по ссылке, там в комментах анимация без наложенного скелета
а с праздником всех влюбленных вас нежно поздравляет прекрасная незнакомка из канала Your AI Sexy Girlfriend
Читать полностью…лови Instruct Pix2Pix Video - новый колаб для стилизации видео по текстовому запросу в интерфейсе gradio от автора вчерашнего блокнота
колаб Pix2Pix Video
space на HF
github
twitter автора
@тоже_моушн
появился новый способ контролировать генерацию в Stable Diffusion, называется ControlNet. доступны разные опции - можно нарисовать скетч от руки или найти эджи на исходной картинке и раскрасить с помощью промпта. можно сгенерировать арт по карте нормалей или - что выглядит наиболее интересным - генерировать персонажа учитывая положение костей скелета на исходной картинке. но это настолько свежая тема что не все пока хорошо работает, ждемс
протестить можно на hugging face
больше опций доступно в колабе
ControlNet на гитхаб
@тоже_моушн
RunWay ML выпустили Video-to-Video
RunWay ML - стартап, который можно описать как Голливуд для бедных (с AI и другими радостями машинного обучения) - выпустили нейросеть, которая может стилизовывать видео. И что круто, без всяких подергиваний и кислотного трипа.
Модель называется Gen-1 (про нее рассказывают начиная с 38 секунды видео), что намекает нам на то, что со временем качество будет только улучшаться. Пока модель в бета-тесте, подать заявку на ее использование можно тут.
🎥 Сайт продукта
пирожочки, 9 марта стартует курс по нейро-анимации в Пражской медиашколе
начнем с азов и познакомимся с самыми популярными способами генерации. и будучи одним из преподавателей, в режиме zoom-call я за ручку проведу вас от задумки до результата
а промокод TOZHE даст вам скидку на обучение. до встречи!
👉🏼 записаться на курс
@тоже_моушн
те кто уже посмотрел вчерашний стрим про ControlNet знают что теперь нам доступна возможность не только делать арт но и работать с текстом прямо в SD. используя разные режимы можно делать как 2д так и 3д тексты (пригодится блендер). новая аватарка для канала была сделана именно таким образом
смотреть запись стрима
@тоже_моушн
по вот этому пайплайну сегодня тоже пройдемся. автор делает годные гайды и на ютубе кстати тоже уроки выкладывает. рекомендую
Читать полностью…нейронками в музыкальных клипах уже никого не удивить, но тут прям очень хорошо получилось. когда и съемка+монтаж на высшем уровне, и руки у нейро художника растут откуда надо - результат огонь! за подгон по классике спасибо Нейросети и Блендер)
смотреть клип целиком
@тоже_моушн
С помощью молотка, молитв и двухметрового костыля я сделал API для ControlNet. Теперь можно работать с ним из Гудини, делать батч-процессинг и прочие прикольные вещи.
Погружение в глубины исходников Автоматика стоило мне пары лет жизни. По возможности избегайте этого.
ControlNet хорош!
☺️ Позволяет не только делать более подробные позы и контролировать положение персонажа, но еще и в мемы можно, пальцев было много в генерациях?
😳 Теперь сетки могут генерить и ног больше и рук и даже голов! Кайф!
🐱 Это все работы toyxyz у него в твиттере еще много всего интересного про ControlNet, мне особенно нравятся связки с Блендером.
🧑🎓 Вот Automatic1111 addon и конечно ждем вскоре Блендер addon.Уверен будет Open Pose для Блендера c возможность анимации, а некоторые уже перенесли
normal генерации ControlNet в Блендер.
вау! получай еще один колаб для стилизации видео с помощью Instruct pix2pix. автор прикрутил к нему Эбсинт (!) для получения более гладкого, консистентного результата
твиттер автора
colab notebook IP2P Video w/ Coherence Guidance
за наводку спасибо Нейросети и Блендер
@тоже_моушн
почему то обожаю фильм Наполеон Динамит. а тут в твиттере наткнулся на пост: чел с помощью Instruct pix2pix стилизовал танец Наполеона в стиль пластилиновой анимации. это конечно не Gen-1 но местами очень неплохо сработало
пост в твиттере
оригинальный танец на ютуб
github Instruct pix2pix
colab notebook Instruct Pix2Pix Video
@тоже_моушн
а ты уже встал в вейтлист Runway Gen-1? тут новый шедевр в твиттере. сверху исходное видео, снизу картинка источник стиля, по центру офигенный результат. очень нравится как черные клавиши превращаются в деревья
пост в твиттере
@тоже_моушн
пора отпугнуть любителей прекрасного! а может наоборот - привлечь) есть тут один проектик слегка откровенного содержания, полностью эйай. а именно - горячие сообщения от нейронной подружки. пост скоро удалю, так что налетай)
Читать полностью…Друзья, всем привет! Появилась отличная возможность познакомиться с Blender для тех кто долго откладывал! Ребята из videosmile.ru подготовили бесплатный мини-курс «Быстрый старт в Blender».
Всего за 5 занятий вы создадите интересную красивую сцену. При поддержке кураторов прокачаете свои навыки работы в Blender.
👉🏼 Получить бесплатный мини-курс «Быстрый старт в Blender»
#промо
наконец то вышел клип для которого я немного помог сделать нейронную обработку в StableWarp. клип прикольный, парни долго и упорно работали, жалко только что из моих тестов мало что пошло в финальный монтаж) на гифке как раз один из тестов
смотреть клип Аминь - Без Сна
@тоже_моушн