lovedeathtransformers | Unsorted

Telegram-канал lovedeathtransformers - Love. Death. Transformers.

4253

❤️☠️🤗 идейная миграция небытия

Subscribe to a channel

Love. Death. Transformers.

не пишите код вала без батчинга пацаны, вам гпу минуты еще нужны...

Читать полностью…

Love. Death. Transformers.

Шел третий год с выхода JAX 1.0, авторы наконец выложили лекцию на youtube

Читать полностью…

Love. Death. Transformers.

Если б программисты строили бы дом
С

Когда взял энкодер с dim 2048, а unet с dim 768

Когда не синканул контракты ml с бэкэндом

Читать полностью…

Love. Death. Transformers.

Кажется next big thing будет auto negative prompt внутри картинко_генерации, причем он будет прикручен к classifier free guidence на уровне эмебедингов, те его не надо будет прописывать ручками

Читать полностью…

Love. Death. Transformers.

Тред вакансий.
Если вы нанимаете DSов, кидайте что ждете от кандидатов, в какой локации и за сколько денег.

Первые 10 попадут в этот пост бесплатно


#job TL;DR:
🏭 Райффайзен Банк, Middle/Senior Python Dev;
🧑‍🤝‍🧑 Команда физтехов, фкнщиков и вмкшников и крутейший тимлид;
🔌 Middle: 200-300, Senior: 350-450 на руки.


🙋🏽‍♂️ Что надо делать?

Помогать нам разрабатывать платформу для учета трейдинговых позиций и интегрировать её во внутренние системы.

Задачи:

– Кодить, а классный менеджер постарается не отвлекать тебя созвонами,
– Продумывать и воплощать архитектуру сервисов,
– Проводить код-ревью,
– Фигачить тесты и вот это вот всё,
– Короче, нужен работник для работы.


😱 Продай мне эту ручку Что у вас в команде крутого?

– Наши финансы это не про программы лояльности, рекомендашки и прочие штуки, которые давным-давно всех достали. Наши финансы про крутые идеи, случайность и реализацию этого добра в машинке.
– Хороший work-life balance, гибкий график, полная удалёнка по дефолту.
– Плюшки вроде ДМС со стоматологией, educative со всеми курсами и очень желающих делиться полезной информацией ребят в команде.
– Льготное кредитование, программа корпоративных скидок и не только.
– Мега-крутой менеджер, 11/10, обожаю его.
– Высокие стандарты кода для разработчиков. Микросервисы, паттерны и прочие прикольности 💨.
– Возможность выбора любого оборудования.


💪 Хм, и что нужно уметь, чтобы к вам залететь?

– Опыт разработки на Python от 5 лет (Senior), от 3 лет (Middle). Если ты немножко недотягиваешь, но рокстар, всё равно пиши, чёб нет.
– SQL, NoSQL, Docker, K8s, GitLab CI/CD. Классика, короче.
– Опыт разработки систем с микросервисной архитектурой.
– Async / multithreading.
– Знание классических алгоритмов и структур данных.


🤙🤙 Особый респект ребятам, которые умеют в:

– TDD/BDD;
– FastAPI;
– Понимание финансовых терминов.


📚 Так, допустим, а какой у вас стек?

– Python.
– Kubernetes, Gitlab CI.
– SQL, NoSQL.
– Всё, что перечислено в требованиях))


✍️ Пиши скорее нашему HR @andelenda, а то закроют вакансию!!1!11


👀 А я вот если крутую вакансию до конца дочитал, никогда не поленюсь лайкос влепить и эйчару CV скинуть, или написать «Братан, вакансия понравилась, но вот что смущает: …». Можно вот этого, пожалуйста?

Читать полностью…

Love. Death. Transformers.

-Если все твои друзья пойдут на статью писать ты тоже пойдешь?
-Да
-Тьфу бля, хиршаеб

Читать полностью…

Love. Death. Transformers.

Noone
totally noone

Me: uncond_embeddings.resize_(1, 6,768)

Читать полностью…

Love. Death. Transformers.

🤯 Cmd J - ChatGPT shortcut for Chrome

Последнее время я каждый день по много раз использую ChatGPT. В основном, чтобы она исправила мой кривой английский или задую ей глупые вопросы 😆

Но мне надоело постоянно копировать текст из текущей вкладки, переключаться на ChatGPT, вставлять текст, дописывать промпт, получать ответ и копировать его обратно. Хочется же проще это делать!

Поэтому мы с ребятами собрали Cmd J - командная панель, через которую можно дергать ChatGPT на любом сайте. Выделяешь текст, затем ⌘J, выбираешь быстро команду или пишешь свой промпт, а затем жмякаешь ентер, чтобы вставить результат обратно. Красота!

Пока правда вставка работает далеко не на всех сайтах. Кто бы мог подумать, что это оказывается сложная задача!

Пока расширение находится в сторе на ревью, вы можете его установить себе из архивчика. Смотрите первый коммент под постом.

Если приложение будет падать или работать через раз, то это норма, хах. Жалобы и фидбек кидайте мне в личку @rebryk

А если у вас есть на уме очень классные промты, которые вы сами гоняете каждый день, то их тоже присылайте. Самые классные добавим в релиз!

Ну как вам?

Читать полностью…

Love. Death. Transformers.

Ну что рабы системы, готовы дальше впахивать?

Читать полностью…

Love. Death. Transformers.

Коллеги, накидайте текстовых датасетов на задачки на русском языке

Читать полностью…

Love. Death. Transformers.

🔥VALL-E: новая zero-shot text2speech модель от Microsoft

Эта модель берет на вход текст и 3-х секундный семпл голоса, на выходе получаем аудиофайл, где проговаривается заданный текст. Причем сохраняется персональность, стиль и интонация.

То есть, чтобы сгенерить голос нового человека, не нужно тренировать модель заново — достаточно только показать модели трехсекундный семпл. Ух, заживём!

Архитектура модели смахивает на Dalle-1 и использует трансформеры. Не путать с Dalle-2, которая работает на диффузии.

Примеры генерации снизу.

Кода пока нет. И я немного сомневаюсь, что они его выложат.

❱❱ Сайт проекта

@ai_newz

Читать полностью…

Love. Death. Transformers.

Если после Дейли вам не приходиться поправлять член, возможно это не работа вашей мечты

Читать полностью…

Love. Death. Transformers.

Чуваки, подскажите как быстрее всего как быстрее всего получить водительские права в Москве 🐸

Читать полностью…

Love. Death. Transformers.

Объявление от Миши Батина. Части читателей может быть интересно:

Каждую среду, начиная с 4 января, будет проходить «Школа анализа данных Проекта AGCT».

Мы прочтем бесплатный курс лекций по следующим темам:

1. Определение геномной сети. Понятие регуляторов: энхансер, сайленсер, транскрипционный фактор. Примеры регуляции и мотивов: цинковый палец, лейциновая застежка (кратко). Подсети метаболической сети.

2. RNA-seq, WGS и экзомы. Основы секвенирования. Понятие экспрессии гена, численное выражение экспрессии (как определяется), FPKM, TPKM. Дифференциальная экспрессия, аннотация генома и транскриптома.

3. Метиллирование и метилом, генные часы, хроматин и его роль. Примеры, mTOR или воспалительный процесс.

4. Математические основы анализа графов. Определение графа, обхода графа, коммьюнити на графе. Мотивы на графах (scale-free графы, случайные графы). Отличие метаболической сети от всех остальных с точки зрения топологии

5. Алгоритмы-1. Поиск коммьюнити на графе. Алгоритмы кластеризации узлов графа (без ML).

6. Алгоритмы-2. Вычисление насыщения (enrichment), статистические критерии, GSEA, enrichR.

7. Базы данных. KEGG, GO, WikiPathway — чем отличаются, чем схожи, для чего нужны.

8. Алгоритмы-3. Новые методы построения сетей: GENIE3, pathfindR, GRNBoost2. ML-подход к кластеризации и аннотации

9. Канцерогенез. Отличия раковых клеток от здоровых, гликолиз, механизм апоптоза, восстановление теломеров. Метаболическая сеть апоптоза и её возможные повреждения, как пример.

10. Старение и его проявление в метаболизме. Возможные примеры воздействия различных гипотез клеточного старения на метаболическую сеть.

11. Бизнес-аналитика биотех-проектов в области анализа данных. Перспективные направления, возможности и подводные камни.

Приходите в наши Зумы. Можно записываться и всё обсуждать в чате Проекта AGCT

/channel/+-GZtdAqsOvcyMGVi

Читать полностью…

Love. Death. Transformers.

Как построить карьеру в AI. Руководство от Andrew Ng

Новый Год 🎄, время строить планы. Если хочется научиться что-то делать в AI, но не знали с чего начать, то читайте дальше!😉

Самый главный популяризатор AI выложил в открытый доступ руководство как построить карьеру в AI.

Руководство очень просто написано и является сборником полезных советов. Можно использовать вместо ментора. Состоит из 3-х основных глав:

1️⃣ Как научиться
2️⃣ Как выбрать проект
3️⃣ Как найти работу

Эндрю дает простые, но важные советы как побороть синдром самозванца, нужно ли глубоко знать математику, и пожалуй самое главное, как правильно выбирать проекты для своего AI портфолио (спойлер, лучше сразу делайте что-то на пересечении вашей экспертизы/того что вам интересно и AI)

Инджой

Читать полностью…

Love. Death. Transformers.

Шалом, я теперь с вами 🇮🇱

Читать полностью…

Love. Death. Transformers.

LoRA: Low-Rank Adaptation of Large Language Models или как ее сунуть то

есть такая эвристика - оптимайзер модели без хаков занимает в 4 раза больше памяти чем сама модель. Тут открывается простор для оптимизаций: перенос оптимайзера на cpu, заморозка модели fp16 и fp8 и все это требует некоторой интелектуальной нагрузки чтобы аккуратно все обучилось и взорвалось.

Но есть путь проще - адаптеры, идея такая: давайте в attention заменим Wq на Wk и Wv что дает выигрышь в 4 раза

github
paper

Читать полностью…

Love. Death. Transformers.

уважающий себя итшник:

Читать полностью…

Love. Death. Transformers.

😧 Девочка: ищет в инстраграме бывшую своего парня
😎 Женщина: ищет через scholar диссер разработчика Adobe, чтобы узнать архитектуру

🚀 Нашла бесплатную
тулзу studio speech enhancement от adobe research и она реально классно работает. Если посмотреть на мелспеки, то видно, что звук стал глубже и фоновых шумов действительно стало меньше.

Модель отрабатывает достаточно долго и точно не годится для рилтайма — значит скорее всего внутри что-то рекуррентное и довольно крупное. Мне стало интересно раскопать, что именно.

Достаточно быстро я нашла на скаляре, что статей со словами studio/adobe/enhancement за 2021+ год не особо много и везде фигурировала Jiaqi Su — PhD из Принстона с этой же темой диссера из adobe research, дальше среди ее недавних работ выделилась и статья с IEEE воркшопа, которая, скорее всего, и является основой технологии

🧩 В чем суть архитектуры?
Внутри wav2wav Hifi-GAN-2. Авторы выделили три критерия "студийности" и их улучшают: зашумленность, реверберация и балансировка эквалайзера. В архитектуре выделяются три компоненты:

1. RNN, которая предсказывает по raw signal (инпут по дефолту 16kHz) MFCC фичи для чистого сигнала
2. WaveNet, который берет на вход raw signal и предсказанные MFCC фичи из первой сетки и предсказывает raw signal в 16kHz
3. Апсемплер в 48 kHz

Данные генерили традиционно — портили хорошие через доступные шумы и скрипты из DAPS/ACE Challenge/etc. В начале статьи авторы вспоминают модели постарше вроде DEMUCS, PoCoNet, обученные на шумах и датасетах из DNS Challenge, где многие данные в 16kHz и что студийки там при всем желании не получится 🙃

Отличие от оригинального Hifi-GANа заключается как раз в первом пункте — сетке, которая считает акустические фичи по шумному инпуту. По мнению авторов, эта модификация значительно улучшает качество звука на выходе.
Большой минус архитектуры — скорость работы, много пространства для оптимизаций господа-студенты, ловите тему для диплома
В статье супер много примеров и схем, так что рекомендую ознакомиться 🤓

Читать полностью…

Love. Death. Transformers.

FLAN-stable diffusion gonna be realised in 2weeks

Читать полностью…

Love. Death. Transformers.

Топ 10 способов не считать градиенты при обучении:
0.

Читать полностью…

Love. Death. Transformers.

- Никогда не спорь с мужчиной, или начинай плакать или раздеваться.

-Дмитрий, наденьте пожалуйста футболку, мы не уменьшим вам налогообложение.

Читать полностью…

Love. Death. Transformers.

Уважаемые разработчики Леруа Мерлен/Петровичич/ват элсе, интегрируйте пожалуйста поиск по картинке на основе CLIP, elastic умеет в кастомные эмбединги!!!

Читать полностью…

Love. Death. Transformers.

Любите админа?
А у него скоро др, если хочется поддержать канал и меня лично, закиньте чеканную монету

Для русских карт:
5536913977088695(тиньк)

5484380014559009(sber)


Для всех остальных:
4578 8900 0085 4842

Для крипто котиков:
Erc20 0x4DBd65ec0C0E91755e02170fC1C8f85FB4D6F4f9

Читать полностью…

Love. Death. Transformers.

#чтивонаночь
Прошлогодний TTS на основе voice-clip(тот же clip, но с voice вместо картинок используется для сэмплирования) gpt_like для генерации токенов диффузии, univnet как вокодер и все это работает для генерации speech.
Есть zeroshot, можно докинуть на 10 секунд голоса и получить проложение тем же голосом

Collab 💫
Project page
Github

Читать полностью…

Love. Death. Transformers.

Э, ну тут короче доучилась обнова anime diffusion - что внутри:
- Fine tune SD1.5 UNet на кэпешенах BLIP на сете аниме ~100gb(danbrou + нарезка клинка, евы, и еще пары аниме)
-аспект ратио только на последней эпохе(1/5) , поэтому лицо за пределами кадра - норма
- тут по прежнему эмбединги с последнего, а не с предпоследнего слоя клипа, so качество рук - ну такое
- модель лежит готовая к вашим извращениям с подобранным негатив промптом

ботик играться @hentaigensteblbot

colab/hfspace - мне было лениво, если кому то надо, cделаю, но генерации на hf норм перформят

Читать полностью…

Love. Death. Transformers.

💡 cервис который перебирает IP и предлагает наиболее выгодную фейковую локацию для booking


Даня, твой выход

Читать полностью…

Love. Death. Transformers.

Как программируют в Сербии:
kebab.remove()

Читать полностью…

Love. Death. Transformers.

Чувак построил стробоскопическую ёлку
тикток

Читать полностью…

Love. Death. Transformers.

Чуваки постарше, посоветуйте неочевидные инвестиции

Читать полностью…
Subscribe to a channel