Вышел плагин ComfyUI-Spectrum-Qwen2.1 для ускорения генерации изображений

Разработчики представили ComfyUI-Spectrum-Qwen2.1 — расширение для популярного интерфейса генерации, оптимизирующее работу модели Qwen-Image-2.1. Инструмент позволяет сократить время обработки запросов за счет изменения алгоритма прохода через слои трансформера.

Основной механизм работы плагина заключается в пропуске от 65% до 70% всех трансформаторных проходов. Для достижения результата используется метод спектрального прогнозирования, который не требует дополнительного дообучения модели. Это позволяет значительно снизить вычислительную нагрузку при сохранении визуальных характеристик выходного контента.

Функциональность расширения включает поддержку генерации изображений с прозрачным фоном и возможность использования нескольких референсных изображений одновременно. Разработчики отмечают, что использование метода спектрального прогнозирования придает результатам генерации специфическую «аэрографическую» эстетику, что может быть полезно для определенных художественных задач.

Инструмент доступен в виде открытого репозитория на GitHub. Использование данного метода позволяет пользователям ComfyUI значительно ускорить процесс инференса без необходимости изменения весов базовой модели. Это решение ориентировано на тех, кто стремится оптимизировать локальные рабочие процессы при работе с мультимодальными архитектурами семейства Qwen.