Видеоэффекты RTX от Nvidia теперь работают в ComfyUI в качестве пользовательских нод. Модели работают быстро, имеют малый вес, поставляются вместе с нодами и выполняются локально на вашем графическом процессоре Nvidia RTX.
- Нода RTX Video Super Resolution увеличивает разрешение изображений и видеокадров до 4 раз — либо с помощью множителя, либо до целевых размеров до 8192 пикселей. Эта же нода может удалять шум или повышать резкость исходного материала без изменения его разрешения.
Нода RTX Video Super Resolution увеличивает изображения и видеокадры до 4 раз — либо с помощью множителя, либо до целевых размеров до 8192 пикселей. Эта же нода может удалять шум или повышать резкость исходного материала без изменения его разрешения.
- Нода RTX Video Frame Generation создает новые кадры между соседними парами для конвертации частоты кадров или замедленной съемки. Она работает в диапазоне от 2× до 16× или с заданным шагом времени.
Нода RTX Video Frame Generation создает новые кадры между соседними парами для конвертации частоты кадров или замедленной съемки. Она работает в диапазоне от 2× до 16× или с заданным шагом времени.
- Нода RTX Video HDR конвертирует изображения из SDR в данные HDR формата BT.2020 с выводом в формате HLG или PQ. Контрастность, насыщенность, средний серый цвет и пиковая яркость в диапазоне от 400 до 2000 нит полностью настраиваются, а фильтр сглаживания цветовых переходов (debanding) включен по умолчанию.
Нода RTX Video HDR конвертирует изображения из SDR в данные HDR формата BT.2020 с выводом в формате HLG или PQ. Контрастность, насыщенность, средний серый цвет и пиковая яркость в диапазоне от 400 до 2000 нит полностью настраиваются, а фильтр сглаживания цветовых переходов (debanding) включен по умолчанию.
С помощью нод NVIDIA VFX вы теперь можете выполнять полный профессиональный пайплайн VFX от начала и до конца. Объединение нод в цепочку от Video Super Resolution → Frame Generation → Video HDR — это быстрый и простой способ улучшить ваши видеоматериалы и подготовить их для дальнейших этапов вашего VFX-пайплайна.
Нода RTX Video Super Resolution — отличный вариант для эффективного апскейлинга, имеющий 19 режимов, которые могут работать с различными типами исходного материала.
- Стандартные режимы выполняют апскейлинг типичных сжатых видеоматериалов.
Стандартные режимы выполняют апскейлинг типичных сжатых видеоматериалов.
- Режимы с высоким битрейтом выполняют апскейлинг чистых или без потерь источников без ненужного подавления артефактов.
Режимы с высоким битрейтом выполняют апскейлинг чистых или без потерь источников без ненужного подавления артефактов.
- Режимы потокового вещания оптимизированы для трансляций и потоков с веб-камер.
Режимы потокового вещания оптимизированы для трансляций и потоков с веб-камер.
- Режимы шумоподавления и повышения резкости очищают материал от шума, артефактов сжатия или мягкости, сохраняя исходное разрешение.
Режимы шумоподавления и повышения резкости очищают материал от шума, артефактов сжатия или мягкости, сохраняя исходное разрешение.
- Также доступен простой режим бикубической интерполяции, когда вам не требуется обработка с помощью ИИ.
Также доступен простой режим бикубической интерполяции, когда вам не требуется обработка с помощью ИИ.
Большинство режимов работают в диапазоне от LOW до ULTRA, обменивая скорость на детализацию. Опциональное 10-битное кодирование сохраняет больше точности. Количество кадров и частота кадров остаются неизменными, что подготавливает ваш материал к следующему шагу в рабочем процессе.
Нода RTX Video Frame Generation предлагает два способа генерации новых кадров внутри входного видео. Режим множителя частоты кадров заполняет каждый промежуток равномерно, от 2× до 16×. Чтобы сохранить исходную длительность, кодируйте результат с исходной частотой кадров, умноженной на множитель. Режим конкретного шага времени вставляет по одному кадру на каждую пару в любой точке между двумя кадрами, что подходит для нестандартного тайминга в дальнейших рабочих процессах. Параметр качества принимает значения LOW, MEDIUM и HIGH. Смена планов определяется автоматически, а ручная опция отмечает известную склейку. Как и RTX Video Super Resolution, эта нода предлагает опциональное 10-битное кодирование для большей точности.
На завершающем этапе рабочего процесса используйте ноду RTX Video HDR для конвертации изображений из SDR в BT.2020 HDR с их исходным разрешением. Вы можете настроить конвертацию с помощью трех элементов управления тоном. Параметры контрастности и насыщенности работают так же, как и при любой цветокоррекции. Средний серый цвет задает опорный уровень для средних тонов, который определяет общую яркость изображения. Пиковая яркость сообщает ноде, насколько яркими должны быть самые светлые участки. Установите ее в соответствии с дисплеем, под который вы делаете цветокоррекцию — в диапазоне от 400 до 2000 нит. Фильтр сглаживания цветовых переходов (debanding) включен по умолчанию, что помогает сгладить заметные ступени, которые могут появляться на градиентах (например, на небе), когда SDR-материал растягивается на более широкий диапазон. На выходе получается стандартное изображение ComfyUI без метаданных цветового пространства, поэтому последующим нодам создания видео (Create Video) необходимо указать, являются ли данные HDR или HDR PQ. Управление цветом и поддержка EXR в этом релизе также решают эту задачу.
Наконец, в папке example_workflows набора нод есть стартовый рабочий процесс для каждой ноды: апскейлинг изображений, апскейлинг видео, генерация кадров и конвертация в HDR, а также один рабочий процесс для конвертации более длинных видео в HDR с использованием циклических нод. Чтобы увидеть совместную работу всех трех нод, попробуйте полный VFX-пайплайн ниже.
Рабочий процесс нод Nvidia VFX
В дополнение к нодам VFX от Nvidia мы улучшаем поддержку формата файлов EXR. EXR — это стандартный формат в VFX-пайплайнах, и этот выпуск значительно упрощает работу с ним в ComfyUI.
- Нода сохранения изображений (расширенная) теперь может записывать EXR с полуточниковой плавающей точкой (16-бит), что теперь является стандартом по умолчанию, а также EXR с полноточниковой плавающей точкой (32-бит).
Нода сохранения изображений (расширенная) теперь может записывать EXR с полуточниковой плавающей точкой (16-бит), что теперь является стандартом по умолчанию, а также EXR с полноточниковой плавающей точкой (32-бит).
- Нода загрузки изображений была улучшена для обеспечения целостности изображений. Теперь она считывает EXR с полуточниковой и полноточниковой плавающей точкой. Значения супер-белого выше 1.0 и отрицательные значения проходят без изменений, а не отсекаются молчаливо, благодаря чему сохраняется весь диапазон данных.
Нода загрузки изображений была улучшена для обеспечения целостности изображений. Теперь она считывает EXR с полуточниковой и полноточниковой плавающей точкой. Значения супер-белого выше 1.0 и отрицательные значения проходят без изменений, а не отсекаются молчаливо, благодаря чему сохраняется весь диапазон данных.
- Управление цветом также получает обновление. Нода конвертации цветового пространства изображения поддерживает sRGB, линейный Rec.709 для сцен, HDR HLG и PQ (Rec.2020), ARRI LogC3 (EI 800) и ACEScct.
Управление цветом также получает обновление. Нода конвертации цветового пространства изображения поддерживает sRGB, линейный Rec.709 для сцен, HDR HLG и PQ (Rec.2020), ARRI LogC3 (EI 800) and ACEScct.
Формат EXR также получает важное улучшение для удобства использования: файлы теперь проще просматривать и скачивать. Поскольку веб-браузеры не могут отображать файлы EXR, наша новая система управления ассетами прикрепляет JPEG-превью к каждому выводу EXR. Превью отображается в нодах сохранения и загрузки, на панели ассетов и в истории задач. Кнопка с изображением маленького солнца в нодах загрузки и сохранения также открывает файл EXR в программе просмотра HDR для более комфортного просмотра.
Примечание: Превью доступны только тогда, когда ComfyUI запускается с аргументом командной строки --enable-asset. Этот флаг устанавливается по умолчанию в Comfy Desktop начиная с версии 1.1.7 и в портативной версии ComfyUI начиная с 0.40.0.
Примечание: Превью доступны только тогда, когда ComfyUI запускается с аргументом командной строки --enable-asset. Этот флаг устанавливается по умолчанию в Comfy Desktop начиная с версии 1.1.7 и в портативной версии ComfyUI начиная с 0.40.0.
Наконец, когда нода сохранения выводит последовательность изображений, новое действие загрузки изображений позволяет выбирать кадры или нажимать «Загрузить все» и скачивать их в виде единого ZIP-архива.
- Обновите ComfyUI до последней версии.
Обновите ComfyUI до последней версии.
- Установите пользовательские узлы Nividia VFX custom nodes через ComfyUI Manager.
Установите пользовательские узлы Nividia VFX custom nodes через ComfyUI Manager.
- Загрузите примеры рабочих процессов из шаблонов пользовательских узлов или скачайте workflows here.
Загрузите примеры рабочих процессов из шаблонов пользовательских узлов или скачайте workflows here.
Попробуйте это в Comfy Cloud и расскажите нам, что у вас получилось. Как всегда, приятного творчества!
Try the Workflow on Comfy Cloud
Нет публикаций
