StableDif

StableDif

Приветствую вас дорогие друзья. Меня зовут Олег (OreX). Я пишу видеоуроки по Stable Diffusion и софту связанному с искусственным интеллектом. Собираю полезные материалы и делюсь с вами. Мои ресурсы: Видеоуроки YouTube: https://youtube.com/@StableDiff Видеоуроки RuTube: https://rutube.ru/channel/28380669/ Мои курсы с поддержкой по Automatic1111 и COMFYUI: https://stabledif.ru Большой чат для общения: https://t.me/stable_dif Поддержка автора на Boosty: https://boosty.to/stabledif
Пикабушник
119 рейтинг 36 подписчиков 2 подписки 40 постов 0 в горячем
12

FramePack — новый подход к генерации видео на потребительском железе

🧠 Что такое FramePack?

FramePack — это инновационная модель генерации видео, разработанная lllyasviel, которая использует прогрессивное предсказание кадров (next-frame prediction) и эффективную компрессию контекста. Это позволяет создавать длинные видео (до 60 секунд при 30 FPS) даже на видеокартах с 6 ГБ VRAM.

🏆 Преимущества FramePack перед WAN 2.1

Длина видео: FramePack позволяет создавать видео продолжительностью до 60 секунд, в то время как WAN 2.1 ограничен примерно 5 секундами.

🦾 Требования к оборудованию:  FramePack работает на видеокартах с 6 ГБ VRAM, что делает его доступным для более широкого круга пользователей.

🚀Скорость генерации: FramePack обеспечивает более быструю генерацию видео благодаря оптимизированной архитектуре и компрессии контекста.

🔗  FramePack установщик отдельного веб интерфейса: ССЫЛКА (https://github.com/lllyasviel/FramePack)

🔗 FramePack workflow для ComfyUi: ССЫЛКА (https://github.com/kijai/ComfyUI-FramePackWrapper/tree/main/...)

✨ FramePack открывает новые возможности для генерации видео, делая этот процесс доступным и эффективным даже на обычных потребительских компьютерах. Попробуйте сами и оцените преимущества этой технологии!

💫 ИНСТРУКЦИЯ ПО УСТАНОВКИ ОТДЕЛЬНОГО ВЕБ ИНТЕРФЕЙСА:

1. Скачайте архив: ССЫЛКА (https://github.com/lllyasviel/FramePack/releases/download/wi...)

2. После загрузки распакуйте и обновитесь с помощью фацла update.bat .

3. Для запуска используцте  run.bat.

4. Модели будут скачиваться автоматически. Загрузится около 30 ГБ с HuggingFace.

💫 ДЛЯ УСТАНОВКИ НА COMFYUI:

1. Установите узлы из этого репозитория: ССЫЛКА (https://github.com/kijai/ComfyUI-FramePackWrapper/tree/main)

2. Скачайте и закиньте рабочий процесс в ComfyUi: ССЫЛКА (https://github.com/kijai/ComfyUI-FramePackWrapper/tree/main/...)

3. Модели должны скачаться автоматически или скачайте их сами по ссылке и поместите в папку models/diffusion_models: ССЫЛКА (https://huggingface.co/lllyasviel/FramePackI2V_HY/tree/main)

4. Так же вам понадобятся текстовые энкодеры: ССЫЛКА (https://huggingface.co/Comfy-Org/HunyuanVideo_repackaged/tre...)

5. Понадобится модель clip-vision: ССЫЛКА (https://huggingface.co/Comfy-Org/sigclip_vision_384/tree/mai...)

Показать полностью
2

PORTABLE настроенная сборка ComfyUI

Всех приветствую 🖐

🔥 Рад вам представить свою портативную настроенною сборку ComfyUI, которая сэкономит кучу вашего времени и подойдет как для опытных пользователей, так и особенно для начинающих. Эта сборка на Python 3.12, torch 2.6, cuda 12.6. (сборку можно скачать БЕСПЛАТНО с boosty.

🔥 После установки СomfyUI приходится устанавливать Manager и различные библиотеки, и это требует время, а для новичков становится сложной задачей. С этой сборкой у вас будет всё гораздо проще, потому что в эту сборку уже установлены:

- insightFace и Envelop

- facexlibe

- dlib

🔥 Установленно много пользовательских узлов:

- Instant-id

- Reactor

- PulID

- OldPhoto Back to Life и многое др.

👁 Смотреть на YOUTUBE (https://youtu.be/qk5IEw2kDKM?si=mebGSXqV1e4WaTJ0)

👁 Смотреть на RUTUBE (https://rutube.ru/video/1037141b457bb31dc3d3c32b1719f121/?r=...)

Показать полностью 2
5

PyTorch 2.6: Что нового?

Встречайте свежий релиз PyTorch 2.6! 🚀 Эта версия приносит множество улучшений, которые делают работу с фреймворком ещё удобнее и эффективнее. Давайте разберём основные нововведения!

🌟 Основные улучшения:

Поддержка Python 3.13 для torch.compile

Теперь вы можете использовать torch.compile с Python 3.13, что открывает новые возможности для оптимизации вашего кода. Это особенно полезно для работы с большими моделями и сложными вычислениями.

Улучшения AOTInductor

AOTInductor (Ahead-of-Time компилятор) получил несколько значительных обновлений. Эти изменения позволяют ещё больше ускорить выполнение моделей на CPU и GPU 💻.

Поддержка FP16 на X86 CPU

В PyTorch 2.6 добавлена поддержка FP16 (полуточности) для процессоров с архитектурой X86. Это означает, что теперь можно добиться более высокой производительности даже на CPU! ⚡️

Расширение возможностей torch.fx

Библиотека torch.fx получила обновления, которые позволяют более гибко работать с графами вычислений. Если вы вносите изменения в граф, не забудьте вызвать метод recompile() для обновления кода 🔄

Новые возможности для работы с моделями

Обновлены инструменты для загрузки и сохранения моделей через torch.load(). Теперь работа с тензорами стала ещё удобнее благодаря улучшенной обработке хранилищ данных 📂

🔗 Подробнее: PyTorch Blog (https://pytorch.org/blog/pytorch2-6/)

Показать полностью

Ускоряем Flux и SDXL - Triton Windows - WaveSpeed

В уроке вы узнаете как можно ускорить генерации на Flux и SDXL в 1,5 - 2,5 раза и при этом не потерять в качестве.

💥 Для Flux мы установим Triton и WaveSpeed.

💥 Для SDXL будем использовать только WaveSpeed.

✅ Triton под windows позволяет поднять скорость на 30% без потерь качества.

✅ WaveSpeed при 30-50% увеличении скорости с определёнными настройками Sampler тоже не вызывает существенного понижения качества генераций.

🎦 СМОТРЕТЬ НА YOUTUBE (https://youtu.be/V1FqOClTN9A)

🎦 СМОТРЕТЬ НА RUTUBE (https://rutube.ru/video/74739553ee565854e2199c9ae3ebf120/)

Показать полностью 1
3

ControlNet Flux Tools | Flux Canny | Flux Depth

📝 Controlnet Flux tools (canny и depth) - это хорошо работающие контрольные сети для генерации на основе контуров и карты глубины для модели flux. Ранее выходили controlnet от xlabs и универсальная union модель, но работали они не так качественно как controlnet tools.

💡В отличии от стандартных схем, в этой схеме есть контроль воздействия контрольной сети, что позволяет более гибко контролировать влияние основной подсказки и стиля на генерацию.

Показать полностью 1
6

ControlNet Flux Tools

ControlNet Flux Tools — это мощные модули, которые расширяют функционал нейросетей для генерации изображений, предоставляя пользователю точный контроль над визуальными характеристиками.

✅ Flux Canny - помогает задавать контуры объектов, чтобы лучше контролировать композицию изображения.

✅ Flux Depth - добавляет глубину сцены, улучшая перспективу и реализм.

ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
ControlNet Flux Tools Искусственный интеллект, Компьютерная графика, Дизайнер, Stable Diffusion, Flux, Controlnet, Нейронные сети, Длиннопост
Показать полностью 6
0

LTX VIDEO STG & SUPIR VIDEO UPSCALE Видео генерации на своём ПК1

🎦 СМОТРЕТЬ НА YOUTUBE

https://youtu.be/r0rlIKubw0Y

🎦 СМОТРЕТЬ НА RUTUBE

https://rutube.ru/video/abb847555b971c14d232cb09db4dd0fd/

✅ Сегодня вы познакомитесь с лучшей на данный момент схемой LTX Video с поддержкой STG.

✅ Схемой апскейла видео на базе быстрой схемы Supir.

⏱️ Вы сможете генерировать 3, 5 и 10 секундные видео.

📌На RTX 4090: 10 сек видео генерируется за 2,5 мин, 5 сек в два раза быстрее.

📌На RTX 3060 12Гб схема генерирует 5 и 10 секундные видео но в 3 раза дольше.

Показать полностью 1

Upscaler Flux Dragon Scale | Custom Tile

🎦 СМОТРЕТЬ НА YOUTUBE

https://youtu.be/yKsbbAeT__E

🎦 СМОТРЕТЬ НА RUTUBE

https://rutube.ru/video/5c579584f107047f694a55ca4ecf6e55/

💥 Flux Upscaler "DRAGON SCALE" - это плиточный upscale на пользовательских узлах имитирующих ControlNet Tile для Flux.

💥 Очень интересное решение позволяющие заменить controlnet tile на современных моделях. Разбиение на плитки позволяет экономить VRAM и описание каждой плитки по отдельности позволяет повысить точность upscale.

✅ Upscaler очень гибкий и имеет много регулировок, позволяющий получить высокое качество на flux upscale.

📝 МЕНЮ

00:00 - Обзор Flux Upscaler - Flux Dragon Scale

02:00 - Установка comfyui

02:37 - Установка моделей и схемы Flux Dragon Scale

05:21 - Схема comfyui - flux dragon scale

15:46 - Загрузка моделей Florence

Показать полностью 1
Отличная работа, все прочитано!