Ostris добавил страницу для генерации контента в AI-Toolkit

Компания Ostris представила обновление для своего инструмента AI-Toolkit, добавив страницу, предназначенную для генерации контента. Это нововведение позволяет пользователям не только тренировать лор (low-rank adaptation), но и создавать контент с его помощью, что значительно упрощает рабочий процесс.

<video><source src="https://rss.neurootlichnik.ru/images/7702eb11-91ef-4c46-b2ea-0f80fab61dde/video_0.mp4" type="video/mp4"/></video>
Интерфейс AI-Toolkit теперь поддерживает множество популярных открытых моделей для различных типов контента. Например, для генерации изображений доступны такие модели, как Krea 2, Flux 1/2, Qwen Image 2512 и другие. Для видео предусмотрены MiniMax H3 и LTXV 2.3 / 2.5, а для музыки — Ace-Step 1.5XL и MiniMax Music 3.

Среди интересных особенностей обновления стоит отметить наличие нескольких вариантов квантизации для трансформеров и текстовых энкодеров, таких как bf16, int-8 convrot, fp8, qfp8 и nvfp4. Также появилась возможность слияния лоры с моделью, что открывает новые горизонты для пользователей.
Теперь в одном интерфейсе можно одновременно тренировать лоры и генерировать контент, что избавляет от необходимости перебрасывать чекпоинты в Comfy. Однако стоит отметить, что Comfy по-прежнему остается более гибким и функциональным инструментом, особенно с его развитой экосистемой.
На данный момент AI-Toolkit находится на стадии альфа-тестирования и имеет некоторые ограничения, в том числе проблемы со скоростью. Например, генерация изображения размером 1024x1024 с использованием fp8 Krea 2 занимает 13 секунд на видеокарте 4090, в то время как в Comfy аналогичное изображение генерируется за 5 секунд. Более крупные изображения, такие как 2048x2048, могут занимать больше минуты или вовсе зависать.
Для удобства пользователей AI-Toolkit можно легко установить и обновить через AI-Toolkit-Easy-Install, что делает его доступным для широкой аудитории.

Нейро Отличник