Stable Diffusion | Text2img

✉️ NanoBananaPro, Sora2, Veo3.1🖱— Самые низкие цены на популярные нейросети: @aigram— Примеры использования: @aigram_prompt

— Ghibli style is already in telegram!— Just send your photo.🤖 Free Ghibli Style Bot

— Face Restoration 🆓— Upscale Photo 🆓— Remove Background 🆓🤖 Upscale Free Bot

— StableDiffusion 🆓 — Flux Dev 🆓🤖 Stable Diffusion Free Bot

Типичный юзер ComfyUI 😁

И снова мега крутая штука. И снова от lllyasviel (автор Контролнета, Фооокуса, Омоста). Точнее даже не новая штука, а легендарный камбэк :) Итак, автор обновил свой "Автоматик" - Forge до версии 2.0.0. Ну, обновил это слабо сказано. Если посмотреть коммиты - там переписано всё (иногда по 2-3 раза): бэкэнд, фронтэнд, модули, оптимизации, очень старые фишки которые давно надо было переделать. Технических обновлений очень много, их просто не перечислить (общее количество правок более 2 миллионов строк!). Давайте посмотрим, что можно получить нам, как пользователям:— Одно из главных нововведений - это обновление Gradio до 4.х+. Он стал стабильнее, отзывчивее, туда добавлена гора новых фишек, при этом сохранился понятный интерфейс. Удобные пространства и рисование во вкладках инпаинта, новые кнопки в работе с изображениями, функциональные слайдеры и т.п.— Поддержка всего на свете. SD3? FLUX? HunyuanDiT? Kolors? Playground? Сигмы и всё такое? Это тут теперь есть! Так же расширена поддержка Диффузеров, поэтому можно будет довольно легко добавить любую свежую модель. — Про FLUX ещё отдельно скажу. lllyasviel сделал собственную имплементацию инфернеса этого чекпоинта и реализовал "прямую" работу с bnb NF4. Для тех кто не понял - это "настоящая" работа чекпоинта в int4, по качеству и скорости превосходящее текущие реализации FP8. Для тех кто всё ещё не понял - подробности тут :) По тестам - FLUX входит в 8 Гб VRAM, но может работать и с 6 (4?). Запустить это можно на 30ХХ+ карточках (ниже просто не поддерживают int4 тензоры на "железном" уровне) и с Cuda-библиотекой версии выше 12.4. Если у вас видеокарта старее - используйте fp8 реализацию. — Реализовано полноценное управление Shared-памятью. Если у вас не хватает видеопамяти на очередную современную модель - часть можно скинуть в RAM. Раньше это делалось автоматически, на основе драйверов. Теперь - можно чётко указать сколько оставить в VRAM (в мегабайтах) и кто будет управлять выгруженной памятью (процессор или видеокарта

Скриншоты для поста ниже. 1-2) Девушки приветствуют новый Forge! 🧍‍♀️🪧3) Гоняем FLUX с ХайресФиксом в Forge (я не знаю зачем Хайрес, просто тестил функционал🤷‍♂️)4) Новые удобные пресеты вверху UI. Переключаются не только плашки вверху, но и семплеры + основные настройки. 5) Кнопки интерфейса в различных полотнах Gradio4.6) Встроенный Контролнет - используем Tile не по назначению!Скриншоты для поста ниже. 1-2) Девушки приветствуют новый Forge! 🧍‍♀️🪧3) Гоняем FLUX с ХайресФиксом в Forge (я не знаю зачем Хайрес, просто тестил функционал🤷‍♂️)4) Новые удобные пресеты вверху UI. Переключаются не только плашки вверху, но и семплеры + основные настройки. 5) Кнопки интерфейса в различных полотнах Gradio4.6) Встроенный Контролнет - используем Tile не по назначению!

Небольшое обновление в ControlNet Automatic1111, касательно предыдущего поста. Если обновиться и переименовать модель в controlnet++_union_sdxl (или часть имени сделать таким), то данный контролнет будет видится во всех официально поддерживаемых режимах. Чуть-чуть подробностей по ссылке - https://github.com/Mikubill/sd-webui-controlnet/discussions/2989 Кстати, лайфхак (кто ещё сам не догадался 👀)! Если использовать одну модель на несколько юнитов - выйдет значительная экономия памяти (только одна модель будет в VRAM). Максимально актуально это для работы с AnimatedDiff, где теперь можно спокойно юзать 4-5 контролнетов.

Тут опять вышла новая штука, мимо которой ну никак не пройти. УНИВЕРСАЛЬНЫЙ SD XL controlnet, который (с одной моделью) работает сразу с десятком препроцессоров:Openpose, Depth, Canny, Lineart, AnimeLineart, Mlsd, Scribble, Hed, Pidi(Softedge), Teed, Segment (!), Normal. Так же, по моим тестам, работают ReColor и Tile/Blur (!)Т.е., по сути, одна модель перекрывает 90% потребностей - остаются отдельные только на IP-адаптеры, инпаинт и Tile (если не устроит результат универсала). Смелые заявления, конечно, давайте посмотрим подробнее так ли это. Во-первых, почитаем страничку автора: Модель имеет следующие ключевые преимущества:- Генерация изображений высокого разрешения с гибким соотношением сторон.- Обучение на большом количестве высококачественных данных (более 10 млн изображений).- Высокая точность понимания подсказок благодаря перефразированным подсказкам и детальным описаниям.- Использование передовых методов улучшения результатов в процессе обучения.- Сопоставимое с ControlNet количество параметров без заметного увеличения вычислительных ресурсов.- Поддерживает более 10 условий управления, при этом не наблюдается заметного снижения качества работы с отдельными условиями по сравнению с моделями, обученными для работы с одним условием.- Поддерживает генерацию изображений с несколькими условиями, при этом слияние условий происходит в процессе обучения, без необходимости ручной настройки гиперпараметров или подсказок.Во-вторых, тесты и сравнения с другими моделями!По картинкам выше. Тестируемая модель названа xinsir_controlnet_xl_UNIVERSAL. Все тесты делал на realismEngineSDXL_v30 (animaPencilXL_v5, если аниме), DPM++ 2M семплер, 20 шагов, 5 CFG, без хайрес фиксов. Промт брал автотагером, негатив - простой стандартный. "Остановка работы" и "Вес" контролнета брались в зависимости от используемого препроцессора, в среднем 0.7-0.9. Выборку не делал, всё с первых попыток. 1-2) Глубина. Здесь и далее - исходник/отработка. У глубины куча различных препроцессоров - и на вс