Революция ИИ на вашем ноутбуке: AMD и Stability AI запустили Stable Diffusion 3.0 Medium для NPU!

Компании AMD и Stability AI представили усовершенствованную версию модели искусственного интеллекта Stable Diffusion 3.0 Medium, адаптированную для работы на нейропроцессорах (NPU). Благодаря этой разработке пользователи смогут локально генерировать изображения и обрабатывать текст прямо на ноутбуках с процессорами AMD Ryzen AI XDNA 2, минуя необходимость использования мощных графических ускорителей.

Ранее, на выставке Computex 2024, AMD и Stability AI презентовали первую блочную версию модели SDXL Turbo в формате FP16, которая сочетала точность FP16 с производительностью, сопоставимой с INT8. Новая версия Stable Diffusion 3.0 Medium также выполнена в FP16-формате и специально адаптирована под NPU-архитектуру, что обеспечивает высокое качество генерации изображений при умеренных системных требованиях, как отметило издание TechPowerUp.

Для запуска модели требуется около 9 Гбайт видеопамяти, а вся система должна иметь не менее 24 Гбайт оперативной памяти. Принцип работы построен на двухэтапной обработке с применением технологии XDNA 2 NPU от AMD, которая позволяет увеличивать разрешение финальных изображений с 1024×1024 пикселей (2 Мп) до 2048×2048 пикселей (4 Мп).

До недавнего времени приложение Amuse, предназначенное для генерации изображений с помощью ИИ, использовало исключительно GPU, что ограничивало доступ к технологии для владельцев менее производительных устройств. Теперь же пользователи смогут выбирать между использованием видеокарты и нейропроцессора в зависимости от задач и характеристик конкретного компьютера.

Для активации новых возможностей необходимо установить актуальную версию драйвера AMD Adrenalin, а также бета-версию приложения Amuse 3.1 от Tensorstack (Amuse AI). После установки пользователь должен в интерфейсе EZ Mode перевести ползунок в положение HQ и активировать опцию XDNA 2 Stable Diffusion Offload.