FLUX 3 Image Klein в ComfyUI: 5,6 млрд параметров с открытыми весами

Источник: Comfy Org•

FLUX 3 Image Klein в ComfyUI: 5,6 млрд параметров с открытыми весами

5,6 млрд параметров — базовые и дистиллированные открытые веса — ограничивающие рамки (bounding boxes) и мультиреференсное редактирование — FLUX 3 Image Klein работает нативно в ComfyUI.

FLUX 3 Image Klein — это компактная модель с открытыми весами в семействе FLUX 3 от Black Forest Labs. Она использует знания, полученные при обучении моделей семейства для работы с изображениями, видео и аудио, и сохраняет функции управления более крупной модели FLUX 3 Image, включая ограничивающие рамки (bounding boxes).

По результатам внутренних оценок Black Forest Labs, FLUX 3 Image Klein превосходит Qwen-Image 2.1 в задачах генерации по текстовому описанию и генерации с использованием нескольких референсов.

Модель поставляется в двух вариантах:

  • Base. Полный недистиллированный чекпоинт. Создан для дообучения (fine-tuning), дальнейшего обучения и исследований.

Base. Полный недистиллированный чекпоинт. Создан для дообучения (fine-tuning), дальнейшего обучения и исследований.

  • Distilled. «Турбо»-вариант с низкой задержкой для сверхбыстрой генерации.

Distilled. «Турбо»-вариант с низкой задержкой для сверхбыстрой генерации.

  • Нативное 4K. Генерация в разрешении 4K, а не апскейлинг до него.

Нативное 4K. Генерация в разрешении 4K, а не апскейлинг до него.

  • Upsampler промптов. Отдельная модель, которая расширяет короткий промпт до детального перед началом генерации.

Upsampler промптов. Отдельная модель, которая расширяет короткий промпт до детального перед началом генерации.

  • 5,6 млрд параметров. Быстрая итерация на одном потребительском GPU.

5,6 млрд параметров. Быстрая итерация на одном потребительском GPU.

  • Генерация и редактирование по нескольким референсам. Загрузите несколько референсов — персонажи и объекты остаются узнаваемыми при редактировании и использовании разных входных данных.

Генерация и редактирование по нескольким референсам. Загрузите несколько референсов — персонажи и объекты остаются узнаваемыми при редактировании и использовании разных входных данных.

  • Ограничивающие рамки (Bounding boxes). Отмечайте области на холсте, чтобы задать композицию и макет. Решайте, где что будет находиться, прежде чем модель заполнит эти области.

Ограничивающие рамки (Bounding boxes). Отмечайте области на холсте, чтобы задать композицию и макет. Решайте, где что будет находиться, прежде чем модель заполнит эти области.

  • Рендеринг и редактирование текста. Вписывает текст в изображение и редактирует уже существующий текст.

Рендеринг и редактирование текста. Вписывает текст в изображение и редактирует уже существующий текст.

  • Перенос стиля на основе референса. Заимствует визуальный стиль референсного изображения, сохраняя запрошенные вами контент и композицию.

Перенос стиля на основе референса. Заимствует визуальный стиль референсного изображения, сохраняя запрошенные вами контент и композицию.

Сочетание квантования INT8 ConvRot с дистиллированной по шагам моделью FLUX 3 Image Klein делает генерацию 1024×1024 от 4,3 до 9,3 раза быстрее, чем базовый вариант BF16 с 50 шагами.

Наибольший прирост заметен на потребительских GPU. На RTX 5070 изображение, которое раньше создавалось 71 секунду, теперь генерируется менее чем за 8 секунд, а на RTX 4070 время сокращается с 78 секунд до менее чем 9.

  • Обновите ComfyUI до последней версии.

Обновите ComfyUI до последней версии.

Скачайте веса FLUX 3 Image Klein с Hugging Face. Выберите или дистиллированную версию (-sd) и поместите их в папку models.

  • Загрузите шаблон FLUX 3 Image Klein из панели Templates.

Загрузите шаблон FLUX 3 Image Klein из панели Templates.

  • Напишите промпт, прикрепите референсные изображения (если вы редактируете) и запустите генерацию.

Напишите промпт, прикрепите референсные изображения (если вы редактируете) и запустите генерацию.

API-ключ не требуется. Веса работают на вашем собственном оборудовании.

Нет публикаций

О чём эта статья