Сбер открыл исходники GFusion: как теперь нейросети пишут текст

У языковых моделей появился новый способ работы с текстом — теперь они не строят ответ по одному слову, а сначала создают черновик целиком, а потом его дорабатывают. Такой подход реализован в открытой диффузионной архитектуре GFusion от Сбера, исходники которой теперь доступны всем.

В чём разница? Раньше нейросеть формировала текст шаг за шагом, подбирая каждое следующее слово, исходя из предыдущих. GFusion сначала "накидывает" общий смысл и структуру ответа, а уже потом уточняет детали. Это напоминает, как человек сначала пишет план, а потом превращает его в связный текст.

Главное преимущество — скорость. По данным разработчиков, генерация текста ускорилась примерно на 45% по сравнению с классическими моделями. Для пользователя это значит, что ждать ответа от нейросети теперь приходится заметно меньше.

Открытие исходного кода GFusion позволяет исследователям и разработчикам изучать новую архитектуру и использовать её в своих проектах. Пока модель только начинает набирать популярность, но сам подход к генерации текста уже выглядит перспективно для задач, где важна скорость и целостность ответа.

Нейро Отличник