ИскИн позвонит

Собственно, да, пошли первые примеры workflows для flux'а в comfyui. Так как никаких контролнетов и ipadapter'ов для флакса пока нет, то народ изгаляется, делая стартовую картинку на sdxl с controlnet + ipadapter, потом VAE отдается во флакс, и получается как бы почти контролнет. Отдельно, в комфи запилили возможность загружать Flux в FP8, что позволяет ему вместиться в 12Гб памяти. Вполне себе доступно простым смертным.

Тем временем Flux уже тизерит видео-модельку. А вокруг картиночной уже ОЧЕНЬ активно начинается строиться инфраструктура. https://blackforestlabs.ai/up-next/

Стабилити тут выпустила новую модельку image-2-3d - stable fast 3d. Попробовал. Действительно ОЧЕНЬ быстро (точно меньше секунды), в целом - чуть лучше прошлых моделек, что я тыкал, но все стандартные проблемы никуда не исчезают. Особенно страдают невидимые лапы у животных, как обычно. Но, надо сказать честно, все лучше и лучше. Тут лежат веса: https://huggingface.co/stabilityai/stable-fast-3d

Еще один видос. С красной кружкой - это photo 2 video, а с синей пеной - попытка сделать шторм в чашке, но из text 2 video (промпт такой же, как использовался для генерации красной кружки в dalle). Интересно, что, по ощущениям, text 2 video более фотореалистичный, хоть и хуже попадает в промпт.

Пару дней назад писал, что Figma запустила свою ИИшечку, и, среди прочего, инструмент по автоматическому созданию дизайна из промпта. Народ поигрался, и оказалось, что по промпту "weather app" оно почти полностью копирует дизайн нативной прилаги про погоду от apple. На картинке слева - weather на ios, справа три примера генерации. На радостях от ожидаемых судебных исков, фигма эту фичу резко закрыла, CEO посыпал голову пеплом, сказал что слишком пушил за дедлайны, поэтому недостаточно QA было.

Вышла довольно интересная публикация, пытающаяся ответить на вопрос - насколько активно LLM используются в написании научных публикаций. Для этого авторы взяли все публикации с PubMed (биомедицина), извлекли из них abstract'ы - короткие описания публикации, отфильтровали только те, что на английском языке, и провели частотный анализ использования слов по годам. Как и ожидалось, есть слова, которые начали заметно активнее использоваться в последние годы. Это могут быть события - коронавирус, новы...

Тут начали всем давать доступ до Kling - стейт оф зе арт генератора видосов. Причем, что приятно, насыпают бесплатных кредитов достаточно на генерацию 5-6 видосов в день. Вот тут: https://klingai.com/

Figma тут анонсировала AI копилот у себя. И это, мне кажется, может быть big deal. Там целый ворох всего, стоит сходить на сайт-поглядеть: и генерация дизайна по промпту, и авто-генерация прототипа, автоматическое именование слоев, генерация типового филлер-контента и т.д. https://www.figma.com/ai/

Довольно интересная работа для геймдева. ИИшечка, которая по point-cloud'у (3д-сканирование, фотограмметрия, но вроде поддерживаются и денс-меши) умеет строить модели с мешами, по их заявлению, уровня как от человеческого 3д-моделера с оптимизированной топологией. Выложили код и веса маленькой версии модели, которая может генерить мешки до 800 face'ов. Но примеры, надо сказать честно, выглядят впечатляюще. https://github.com/buaacyw/MeshAnything

Сегодня по куче каналов прошла новость, мол, ИИшечка разработала ракетный двигатель, его напечатали и запустили, и ушло на все 20 минут. Вообще, что смешно, никакой связи с ИИ у всего этого нет, там могут быть элементы reinforcement learning'а, но чаще всего - генетические алгоритмы. Но раз уж все написали - напишу и я. Есть такая сфера - Computational Engineering, которая занимается разработкой вычислительных моделей для проектирования(так же известных как CEM - computational engineering models...