10034
нейромагия + моушн дизайн тренды, новости, эксперименты связь с автором @vsewall чат канала https://t.me/+rmQcCIEN93ExMjUy
лови Instruct Pix2Pix Video - новый колаб для стилизации видео по текстовому запросу в интерфейсе gradio от автора вчерашнего блокнота
колаб Pix2Pix Video
space на HF
github
twitter автора
@тоже_моушн
появился новый способ контролировать генерацию в Stable Diffusion, называется ControlNet. доступны разные опции - можно нарисовать скетч от руки или найти эджи на исходной картинке и раскрасить с помощью промпта. можно сгенерировать арт по карте нормалей или - что выглядит наиболее интересным - генерировать персонажа учитывая положение костей скелета на исходной картинке. но это настолько свежая тема что не все пока хорошо работает, ждемс
протестить можно на hugging face
больше опций доступно в колабе
ControlNet на гитхаб
@тоже_моушн
RunWay ML выпустили Video-to-Video
RunWay ML - стартап, который можно описать как Голливуд для бедных (с AI и другими радостями машинного обучения) - выпустили нейросеть, которая может стилизовывать видео. И что круто, без всяких подергиваний и кислотного трипа.
Модель называется Gen-1 (про нее рассказывают начиная с 38 секунды видео), что намекает нам на то, что со временем качество будет только улучшаться. Пока модель в бета-тесте, подать заявку на ее использование можно тут.
🎥 Сайт продукта
запасаемся чаем и плюшками и бегом в ютуб! урок о продвинутой анимации в колабе Deforum уже на канале! рассказываю про ключи, математику, привязку анимации к звуку и экспорте камеры в дефорум из блендера. приятного просмотра)
Читать полностью…
Художница Евгения Шабунина сделала полностью нейрогенеративный клип «Мир спасет красота» для группы АИГЕЛ. Я немного расспросила Евгению о деталях процесса, она поделилась техническими деталями и любимыми кадрами.
Клип был сделан с помощью, кажется, всех существующих вариантов нейрообработки: warpfusion, Deforum и где-то img2img, где не подходили другие способы. Художница говорит, что самое сложное было придумать концепцию чтобы технически все ложилось, он очень много времени потратила на всякие тесты, потому что все-таки не все придуманное в голове пока можно реализовать с помощью нейросетей.
Открытием стало то, что все хорошо и удобно можно миксовать с 3D-графикой, с которой художница уже работала до этого, как полгода назад занялась нейросетевым искусством.
Для меня этот инструмент стал каким то спасением от творческого кризиса, поэтому все таки я думаю еще много проектов нам предстоит пройти вместе.
А в этом проекте получилось крутое путешествие по разным мирам. Мир все-таки спасет красота. И ИИ 🫀🦾
ха, свежий ресурс для создания ИИ анимации! можно по текстовому запросу или по исходной картинке, и все бесплатно. результаты чем то похожи на то что делает колаб Кэтрин Кроусон. больше красивых генераций можно посмотреть в комментах
сайт для создания анимации
колаб Кэтрин Кроусон
@тоже_моушн
опробовал на себе новый img2img по текстовому запросу - InstructPix2Pix. прикольная штука с большим потенциалом. пишешь что хочешь поменять на картинке и она это делает (не всегда). примеры того что умеет и демо - по ссылкам ниже
демо на hf
подробнее о проекте
гитхаб
@тоже_моушн
вчерашний стрим на ютуб - без редактуры, со всеми косяками. смотреть лучше на скорости 1.5)
всем кто участвовал - спасибо! это был интересный опыт. учту ошибки и в следующий раз постараюсь сделать лучше.
а если у тебя есть идеи - о чем еще сделать урок или стрим, пиши в комменты
@тоже_моушн
Выкатили демку Image Mixer
Будем посмотреть, насколько она далека от MidJourney
Тыкать тут
@derplearning
что же это за зверь такой - DeepFloyd?
вчера неожиданно попал на альфа тестирование новой нейронки. и первое что очень хотелось потрогать - генерацию текста на картинках. отличный повод сделать новые аватарки для канала)
не всегда выходит правильно с первого раза - но это и не удивительно. сетка совсем молодая, а привычные правила промтинга работающие для других генераторов тут приходится менять, подстраивать прямо на ходу.
с художественной точки зрения - есть потенциал, сеть неплохо умеет в некоторых художников, а иногда очень хорошо получается даже фотореализм
за возможность прикоснуться к прекрасному огромная благодарность Мишин Лернинг и shonenkov AI
@тоже_моушн
крутейший проект по превращению картинки из миджорней в почти осязаемый 3д объект. такое можно уже и на ЧПУ отправлять. ЭйАйЛера написала об этом подробней, рекомендую также сходить по ссылкам на бехансе и mikevrpv/generative-3d-texturing-using-ai-depth-estimation-and-substance-2c5503a3da9f">медиум
@тоже_моушн
а вот и гайд - очень короткий и очень насыщенный - о том как пользоваться новым колабом для анимации stable diffusion
colab SD smooth interpolation
@тоже_моушн
победил таки задачу плавной интерполяции сид+промт.
если коротко - были готовые решения отдельно для промтов и отдельно для сидов. но красивая картинка - всегда получается из пары этих параметров. теперь умею выстраивать их в последовательность и морфить между собой. а в планах - научиться делать это динамично под музыку
@тоже_моушн
а говорят SD v2.1 не умеет в сисечки. внимательный да увидит. это интерполяция промтов в дефоруме. то есть попытка в плавную морфинг анимацию из одной точки в другую. жаль что v2.1 в плавность не умеет
@тоже_моушн
это видео можно включать с любым новогодним треком - проверено создает новогоднее настроение
Читать полностью…
пора отпугнуть любителей прекрасного! а может наоборот - привлечь) есть тут один проектик слегка откровенного содержания, полностью эйай. а именно - горячие сообщения от нейронной подружки. пост скоро удалю, так что налетай)
Читать полностью…
Друзья, всем привет! Появилась отличная возможность познакомиться с Blender для тех кто долго откладывал! Ребята из videosmile.ru подготовили бесплатный мини-курс «Быстрый старт в Blender».
Всего за 5 занятий вы создадите интересную красивую сцену. При поддержке кураторов прокачаете свои навыки работы в Blender.
👉🏼 Получить бесплатный мини-курс «Быстрый старт в Blender»
#промо
наконец то вышел клип для которого я немного помог сделать нейронную обработку в StableWarp. клип прикольный, парни долго и упорно работали, жалко только что из моих тестов мало что пошло в финальный монтаж) на гифке как раз один из тестов
смотреть клип Аминь - Без Сна
@тоже_моушн
🖼️ Нейросети используют даже в анимации — и уже не энтузиасты, а гиганты кинопроизводства. В одном из первых подобных кейсов Netflix и японская Wit Studio сделали короткометражку «The Dog & The Boy» — в ней для создания фоновых изображений участвовала нейросеть. Посмотреть полностью можно тут.
Выглядит неплохо, но проект получил шквал критики. Netflix утверждает, что использовал нейронку «из-за нехватки рабочей силы», хотя в индустрии её вполне хватает. Мультипликаторы жалуются, что Netflix использует ИИ в целях экономии — вместо того, чтобы повысить выплаты художникам. Кожаных мешков уже заменяют нейронки, а мы даже и не заметили.
#AI | Not Boring Tech
кажется у стайлгана есть все шансы вернуться в игру. по крайней мере создатели нового StyleGAN-T утверждают что он значительно превосходит предыдущие GAN и даже дистиллированные диффузионные модели в задаче генерации изображения из текста. а главное - с его помощью появляется возможность предельно плавной анимации, недоступной в Stable Diffusion. видео в презентации совсем крохотное и кода пока нет - подождем, выглядит это ну очень перспективно.
и как говорится - вот э тайм ту би элайф!
страница проекта
гитхаб (пока без кода)
paper
@тоже_моушн
замутил в блендере крутецкий шейдер который делает хроматические аберрации в отражениях. файлом с материалом делюсь в комментах
и да, я теперь еще и цифровая швея)
@тоже_моушн
еще один нейротаймлапс (похоже на то что недавно репостил). выглядит шикарно! и на первый взгляд - недосягаемая магия. однако на реддите пишут что не такая уж и магия:
It's basically just prompting a 'X year old boy/girl sitting on a couch', changing X by just one year until about 5, then skipping 5 years every 10 or so frames. Once you get to about age 20, replace boy/girl with man/woman.видео на ютубе Читать полностью…
This is in Deforum on Automatic1111.
потихоньку начинаю, присоединяйтесь. если есть вопросы или комментарии - пишите в чат канала
Читать полностью…
а давайте сегодня вечером стрим устроим? погенерим, познакомимся, обсудим последние нейро-новости? начнем в 21 по мск
Читать полностью…
если ты используешь для анимации дефорум, давай подскажу как делать это еще эффективней и интересней) понадобится блендер и пара скриптов для экспорта анимации в понятный дефоруму формат ключей
первый - для превращения звука в кейфреймы. гайд от автора
второй - для экспорта анимации камеры (чума!)
в комменты положу еще примеры того что получается с 3д камерой
@тоже_моушн
еще одна удачная анимация из нового гайда. и как обычно после эксперимента - остается много (160!) годных картинок, которыми по доброй традиции с вами делюсь. может кто то узнает себя или знакомых, а кто то наконец обновит аватарку. а для кого то может быть это станет удачным референсом или инспирейшном. enjoy!
портреты забирать тут
еще посты с портретами - раз, два
@тоже_моушн
ну что, готовы к продвинутой интерполяции?
не ограничивай себя статичными генерациями! возьми уже наконец свои seeds и prompts, расположи в красивом порядке и сгенерируй плавную* анимацию в новом колабе!
colab notebook
*плавную насколько это возможно
@тоже_моушн
стоило мне только начать пилить собственную audio-reactive stable diffusion сборку как оказалось что уже есть подобный проект с очень неплохими промежуточными результатами. при этом основная фишка по задумке авторов - отказ от текстовых промтов и использование картинок вместо них
пост в твиттере
страничка проекта
@тоже_моушн
Потрясающая анимация о годах
Соединив Dreambooth модель обученную на своих портретах и Deforum, Ziyue Li создал анимацию сквозь года с собственным лицом и дополнил текстом:
“Эта мимолетная жизнь в конечном счете будет потеряна для всех нас. С таким же успехом ты мог бы быть смелым и любить кого-то, взбираться на гору и преследовать мечту.”
Анимация
а я просто хочу напомнить как выглядела нейронная графика ровно год назад
если вглядываться в каждую отдельную сцену - невозможно понять что там нарисовано, но при этом легко считывается настроение и контекст сцены. это еще до всех этих ваших dalle и stable diffusion
а еще это метаирония, метамодерн и нестареющая классика
@тоже_моушн