ACE++ Subject Advanced Redux 512 | Clip vision 512
В этой статье показан пример использования ComfyUI для для перенсоса объектов и лиц. Ниже приведён рабочий workflow, для ACE++. Предполагается, что вы уже знаете как установить, запустить ComfyUI, как установить менеджер, ноды и прежставляейте куда складировать модели.
Как использовать
- Откройте ComfyUI и загрузите workflow из этого примера.
- Вам нужно скачать модели. Вот ссылки на них:
Flux-Fill-Dev-fp8 - модель Flux для перерисовывания(inpainting) - это сжатая версия - если хотие на сайте можно оригинальную полную Flux-Dev на этом же сайте скачать, либо еще более сжатую можно поискать - все зависит от мощности вашего компьютера.
t5xxl encoder - это модель для кодирования ваших подсказок(они же - промты или же текстовые инструкции для нейросети, что вы от нее хотите) в векторы для нейросетей. Эта модель только английский понимает(которые русский понимают - существуют - но переводчиком все-таки быстрее воспользоваться, чем искать совместимые).
VAE Переводит изображение из латентного в обычный формат и обратно. Нейросети работают в латентном пространстве, а для отображения на экране нужно преобразовать в обычное изображение.
Clip Vision 512 Эта модель преобразует изображение в подсказку.
Redux 512 Эта модель контролирует следование подсказки.
Ace++ lora для переноса объектов Помогает основной модели переносить объекты.(Даже не так - помогает нарисовать нужный объект на новом месте)
Ace++ lora для переноса лиц Помогает модели рисовать старые лица на новом месте.(да, есть разница - перенос(swap) лица это другой способ)
RMBG Удаляет фон с изображения. Вам понадобядтся следующие файлы: pytorch_model.bin, config.json, birefnet.py, BiRefNet_config.py. Вообще нода которые требует эту модель должна сама скачать все, что ей нужно, но у меня она не смогла .
Расположите скачанные файлы в папке ComfyUI/models/ в соответствующие подпапки:
- diffusion_models - для Flux-Fill-Dev-fp8
- text_encoders - для t5xxl encoder
- vae - для VAE
- clip_vision - для Clip Vision 512
- style_models - для Redux 512
- loras - для comfyui_subject_lora16.safetensors и comfyui_portrait_lora64.safetensors
- BiRefNet\RMBG-2.0 - для RMBG
Если у вас нет каких-либо из этих папок - создайте их в ComfyUI/models/. BiRefNet\RMBG-2.0 - это значит, что папка RMBG-2.0 будет внутри папки BiRefNet.