Нейросети и смежное :)

[dok34.ru]

The checkpoint goes in ComfyUI/models/unet (not checkpoints)
Download the original weights here:

https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/flux1-dev.sft

Download the fp8 version for <24gb vram systems:

flux1-dev-fp8.safetensors · Kijai/flux-fp8 at main

We’re on a journey to advance and democratize artificial intelligence through open source and open science.

huggingface.co

Text encoders go in ComfyUI/models/clip:

comfyanonymous/flux_text_encoders at main

We’re on a journey to advance and democratize artificial intelligence through open source and open science.

huggingface.co

VAE (ae.sft) goes in ComfyUI/models/vae:

https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/ae.sft

Download the fp8 t5xxl for degraded quality but less RAM use
Launch ComfyUI with "--lowvram" arg (in the .bat file) to offload text encoder to CPU.

I can confirm this runs on:
- RTX 3090 (24gb) 1.29s/it
- RTX 4070 (12gb) 85s/it
Both running the fp8 quantized version. The 4070 is very slow though.

 

[dok34.ru]

Это из картинки, у меня - 6 сек на итерацию
Поэтому многие применяют меньшие модели, 8-битные

 

[dok34.ru]

Сбер выкладывает GigaChat Lite в открытый доступ

Салют, Хабр! В начале ноября мы делились с вами новостями о нашем флагмане GigaChat MAX и пообещали рассказать подробнее о процессе создания наших Pretrain-моделей. Пришло время сдержать слово и даже...

habr.com

...тема Субличностей- экспертов 😉
Ну и нейросети, конечно🙂

 

[Ira]

Разбираюсь с комфи, пробую генерить аниме (на нем быстрее работает) - вариация тестового промпта и воркфлоу темплейта Two pass upscale (процессы записаны в картинках, можно загрузить)






Но есть проблема - не получается запустить процесс с картинок с civitai, постоянно выдает ошибку vae decode



любой процесс с этого сайта дает такую ошибку, неважно какой чекпоинт используется.

например вот эта -

Image posted by Lisarfa

civitai.com

Непонятно почему.

 

[Ira]

Заметила что лучше использовать специализированные модели чем общие, обученные на все но недостаточно (прямо как эрудиция и специализация) еще много вопросов - как создавать свои процессы, использовать лоры, и так далее.

Аниме модели не обучены на мальчиках зачастую, так что получаются вот такие мальчики 🙂

промпт -

masterpiece, best quality, newest, absurdres, highres, safe, very aesthetic, intricate details boy, prince, cute and beautiful face, blue eyes, smile, looking away, blunt bangs, blond hair, long hair, wavy hair, crown, elegant, (blue:1.4), off-shoulder, ankle boots, whole body shines divinely, walking, full body, hands on stomach, garden, open gate, tree, path, castle, blue sky, depth of field

 

[dok34.ru]

Разбираюсь с комфи, пробую генерить аниме (на нем быстрее работает) - вариация тестового промпта и воркфлоу темплейта Two pass upscale (процессы записаны в картинках, можно загрузить)

Посмотреть вложение 8926


Посмотреть вложение 8927

Но есть проблема - не получается запустить процесс с картинок с civitai, постоянно выдает ошибку vae decode

Посмотреть вложение 8928

любой процесс с этого сайта дает такую ошибку, неважно какой чекпоинт используется.

например вот эта -

Image posted by Lisarfa

civitai.com

Непонятно почему.

Там хитрость, надо отдельный vae ставить, отдельной нодой!

 

[Ira]

Там хитрость, надо отдельный vae ставить, отдельной нодой!

Да, но какой? Ставится стандартный (точнее тот что есть)

 

[Ira]

Для картинки по ссылке например вае не указан в параметрах - только модель




вот все данные

masterpiece, best quality, newest, absurdres, highres, safe, very aesthetic, intricate details
girl, princess, cute and beautiful face, blue eyes, smile, looking away,
blunt bangs, blond hair, long hair, wavy hair, silver tiara, elegant,
(blue:1.4) dress, princess mini dress, off-shoulder, white long glove, white thighhighs, ankle boots, whole body shines divinely, medium breasts,
walking, full body, hands on stomach, garden, open gate, tree, path, castle, blue sky, depth of field
Negative prompt: nsfw, signature, username, logo
Steps: 30, CFG scale: 7, Sampler: Euler, Seed: 702008617, Size: 1152x896,
Model: catTowerNoobaiXL_v14Vpred, Version: f1.0.5-v1.10.1RC-latest-801-g62a6cdf1,
Model hash: ba176f8ee4, Time taken: 0.0 sec.,
Hires steps: 20, Hardware Info: [object Object], Hires upscale: 2, Schedule type: Simple,
Hires upscaler: 4x-AnimeSharp,
ADetailer model: face_yolov8n_v2.pt, ADetailer version: 24.6.0, Denoising strength: 0.22, ADetailer mask blur: 4, ADetailer confidence: 0.3, ADetailer dilate erode: 4, ADetailer inpaint padding: 32, ADetailer denoising strength: 0.4, ADetailer inpaint only masked: True, Clip skip: 2

она требовала только то что я выделила -модель и апскейлер. Там еще есть детайлер, но его она не требовала.

 

[dok34.ru]

Для картинки по ссылке например вае не указан в параметрах - только модель

Посмотреть вложение 8933


вот все данные

masterpiece, best quality, newest, absurdres, highres, safe, very aesthetic, intricate details
girl, princess, cute and beautiful face, blue eyes, smile, looking away,
blunt bangs, blond hair, long hair, wavy hair, silver tiara, elegant,
(blue:1.4) dress, princess mini dress, off-shoulder, white long glove, white thighhighs, ankle boots, whole body shines divinely, medium breasts,
walking, full body, hands on stomach, garden, open gate, tree, path, castle, blue sky, depth of field
Negative prompt: nsfw, signature, username, logo
Steps: 30, CFG scale: 7, Sampler: Euler, Seed: 702008617, Size: 1152x896,
Model: catTowerNoobaiXL_v14Vpred, Version: f1.0.5-v1.10.1RC-latest-801-g62a6cdf1,
Model hash: ba176f8ee4, Time taken: 0.0 sec.,
Hires steps: 20, Hardware Info: [object Object], Hires upscale: 2, Schedule type: Simple,
Hires upscaler: 4x-AnimeSharp,
ADetailer model: face_yolov8n_v2.pt, ADetailer version: 24.6.0, Denoising strength: 0.22, ADetailer mask blur: 4, ADetailer confidence: 0.3, ADetailer dilate erode: 4, ADetailer inpaint padding: 32, ADetailer denoising strength: 0.4, ADetailer inpaint only masked: True, Clip skip: 2

она требовала только то что я выделила -модель и апскейлер. Там еще есть детайлер, но его она не требовала.

Ок, я после работы на компе посмотрю, покажу предметно.
Наизусть не все ноды помню 🙂

 

[dok34.ru]

Cat Tower (NoobAI XL checkpoint) - v1.4 (vPred) | Illustrious Checkpoint | Civitai

Cat Tower is anime style NoobAI XL checkpoint. VAE is baked in. If you are using Epsilon-pred v1.1 downloaded before Dec. 5th, 2024 0:00 (UTC) and ...

civitai.com

Так, исходное тут - SD
Вероятно 1.0
То есть изначально ...старая, ранняя модель.
Просто к слову.
Качаю пока 🙂
...я на FUSE либо на SD 3.5 не просто так перелез 🙂