AI Brain (Aibek Alanov)

Набор студентов на наши исследовательские проекты 🎓 Октябрь - время выбирать темы курсовых и дипломов. Наши команды из Controllable GenAI (AIRI) и BayesGroup (ВШЭ) запускают новый поток проектов по генеративным моделям. Темы на любой вкус: 🔁 от диффузионок и GANов до GFlowNets; ⚡️ от ускорения и квантизации до поиска интерпретируемых векторов в генеративных моделях; 🖼 от редактирования изображений и видео до персонализированной генерации; 🧬 от генерации текстов, белков/протеинов, кристаллов ...

Всем привет! Мы сейчас готовим статьи к конференции NeurIPS. Это одна из самых престижных конференций по AI. UPD. Всем спасибо! ♥️ Мы набрали нужное количество данных для нашего исследования, поэтому бота уже выключили. Нам для одной из статей нужно провести сравнение нашего метода с лучшими конкурентами с помощью человеческих оценок (это называется user study). Поэтому мы будем очень благодарны, если вы сможете помочь и пройти наш опрос 🙏 Мы сделали супер удобного бота @tlora_sbs_bot для оценк...

Пишу про нашу новую работу, которую мы недавно засабмитили на NeurIPS. В нашей статье ImageReFL: Balancing Quality and Diversity in Human-Aligned Diffusion Models мы исследуем методы дообучения диффузионных моделей на основе пользовательских предпочтений для повышения качества генерации изображений. Существующие методы оптимизации (ReFL, DraftK, DRTune, AlignProp) страдают от reward hacking — модель переобучается на модель награды, что снижает разнообразие изображений. Мы предлагаем метод комбин...

Подробнее о генеративных моделях для изображений — в новом Хабре⤵️ Нейросети для генерации изображений — это одно из самых горячих направлений в машинном обучении последних лет. Кандидат компьютерных наук, руководитель группы «Контролируемый генеративный ИИ» лаборатории FusionBrain AIRI, заведующий Центра глубинного обучения и байесовских методов ВШЭ Айбек Аланов прочитал о них лекцию на МТС True Tech Day, по мотивам которой написал статью на Хабре. Айбек рассказал об истории генеративных моделе...

Сегодня выступаю на True Tech Day. Рассказываю про современные генеративки и как они устроены 😉

🔬Знакомство с нашей научной группой в Вышке Приглашаю всех заглянуть к нам на встречу в Вышке, где мы расскажем про наш Центр, и покажем, что наука — это не скучные формулы, а интересные и красивые задачи. Если у вас уже есть вопросы — готовьте их, мы любим дискуссии. 😉 Подробности есть в этом посте https://t.me/fcs_life/72 Если возникнут вопросы, пишите в комментариях или мне в лс Ждем вас в Вышке!

Как ускорить обучение диффузионных моделей с помощью self-supervised признаков Известно, что в процессе обучения диффузионки выучивают внутренние семантические представления объектов. Это логично, ведь чтобы сгенерировать объекты, модель должна «понимать» их семантику. Однако существует целое направление машинного обучения — self-supervised learning (SSL), цель которого как раз заключается в обучении энкодеров, эффективно выделяющих семантические признаки объектов без необходимости генерации. Ин...

Когда чувства компилируются без ошибок❤ Мы сделали валентинки для тех, кто видит красоту в коде, звёздное небо в репозиториях и всегда выбирает оптимальный путь — и в науке, и в жизни. Отправляйте их коллегам, друзьям и просто дорогим людям. Пусть ваши градиенты сходятся, модели не переобучаются, а сердце остаётся в стабильной конвергенции!

Гайденс в диффузионных моделях В этом посте начнем разбираться с техникой гайденса, без которой не работают все современные диффузионки, такие как Flux, SD 3.5 и т.д. Все, кто на практике использовал диффузионки, знают, что для более качественной генерации необходимо использовать высокий гайденс скейл. Без этого генерация будет совсем плохой - будет страдать общее качество и соответствие текстовому промпту (первая картинка - генерация с высоким гайденс скейлом, вторая - с низким). Хотя техника г...