Stable Video Diffusion
ฝัง
- เผยแพร่เมื่อ 21 พ.ย. 2023
- ► Boosty (эксклюзив) ➜ boosty.to/xpuct
► Telegram ➜ t.me/win10tweaker
► Discord ➜ / discord
Stable Video Diffusion:
github.com/Stability-AI/gener...
🔥 Deliberate: deliberate.pro
🔥 Reliberate: huggingface.co/XpucT/Relibera...
🔥 LowRA: huggingface.co/XpucT/Loras/tr...
Плейлист Stable Diffusion: • Stable Diffusion
МОЯ ВЕРСИЯ Stable Diffusion: • Stable Diffusion Porta...
#StableDiffusion #StableVideoDiffusion - วิทยาศาสตร์และเทคโนโลยี
Через год: - Нео, что не так?, - я видел кота, а потом снова видел кота, того же самого.- это сбой матрицы!
До чего дошел прогресс! До невиданных чудес!
"Это не техника дошла, это я сама сюда дошла. На лыжах"
Ещё нет
Вот прям так и ждали, а будет ли ролик или нет. И вот, свершилось! Спасибо, было интересно! Не все потянут такие игрушки, но время покажет ✌
Ой, как бы могло облегчить работу, если научить эту нейроночку делать 8-битные анимации.
Можно попросить сгенерировать кадры у Dalle-3. Кажется, он бесплатный в Bing, но я не проверял
@@Daniel81877 я пытался - даже раскадровку сделать не получается
@@svinbreaker а я сделал раскадровку. элементарно.
@@quadropeller8734 в далл-и? Подскажи запрос, пожалуйста
Я так понимаю обучение нейройни для видео с учетом контекста выглядит примерно следующим образом:
видео разбивается покадрово на изображения,
затем эти картинки скармливаются нейронке, но при этом так, чтобы между ними сохранялась связь.
Вся эта процедура повторяется примерно дохреналион раз,
после чего картинка или промт, который мы подсовываем, анализируется нейронкой, находится по кусочкам в базе и выдается нам результат с учетом контектса, который присутствовал в видео изначально скормленного нейронке.
Гений
Да сколько можно, я картинки то ещё не научился генерить нормально а тут уже видео можно делать, сделайте нейронку работающая за меня(((
Делается😁
Сегодня мы умиляемся как нейронка понимает как ходит котик, завтра нейронка будет умиляться как человек бегает по пустошам
"И восстали машины из пепла ядерного огня..." :DD
😂 почему то с каждым годом с иронией это вспоминаю)
сегодня вы будите умилятся мошенникам которые будут звонить по видео связи (просить пароли от сотрудников по работе, родственники попавшие в аварию из ваших фоточек из соцсетей и тд.)
А красивые крокодилы будут? С зубами.
Самый лучший и легендарный момент
Я видео ещё не посмотрел но по иконки видно я понял что это легендарный момент
Хачатур, даже перед тем, как посмотреть, напишу тебе комментарии и поставлю лайк. Почему? - Ты, краса! Уверен, что все расскажешь, на high level.
Часовой видос на эту тему с кайфом посмотрел бы
реально correctly, мэн‼️
Ништяяяк. 🌟🌟🌟
Долго ждали... Ан-нет, не так уж и долго ✅👍👍👍
Год ждали. Всего один год.
УРА!! дождался видео про видео
Конечно сборка нам нужна!
Донатим друзья!!!! очень надо)
Я в шоке как далеко мы полетим с этими возможностями )
Хачатур, спасибо за видос
16 гигов, прям очень много для минимального порога вхождения, особенно учитывая стоимость видеокарт. Но лайк поставлю и смотреть за видео по этой нейросети от тебя буду)
Хватает и 9-10гб. Для 512x512 может и 6-8гб хватить.
Успел за месяц потестить нейронку.
а что если 6-8? оно вообще генерировать не будет?
@@John___Doe Обычно съедает всю память и крашит.
Иногда может упасть драйвер или перезапуститься оболочка.
@@flashback6836печально, значит будем ждать спец видюх для нейросетей, для майнеров нвидиа сделала спец видеокарты
@@flashback6836 Скажите пожалуйста, как ее запустить? В архиве нет батника, как в SD.
Волшебно :)
Приветствую, пишу комментарий до того как досмотрю до конца, уверен в вашем ролике, очень хотелось всегда генерировать видео, и не платить за это по 200$, как требуют другие сервисы, а только использовать мощности своей видеокарты, Хачатур, спасибо за труды!
тут блин с нынешним курсом не укупишь эту карту ((( может настанет тот час, когда не надо будет так много ресурсов потреблять для генерации видео.
разумеется, с течением времени будут выходить хотфиксы, патчи, и прочее, что ускорит работу и уменьшит количество требуемых ресурсов, я как раз высказался на эту тему в новом видео@@naotmash
@@naotmash скорее более мощные видяхи постепенно будут появляться )
@@Rublev13 на подходе новое)
Ну двигаются потихоньку ребята. Пока конечно шляпа полная, вернусь к теме нейро-видео ещё через год. Сейчас даже ковырять это не буду )
Но за старания и обзор спасибо )
Ну и хорошо, что не будешь. Мы тебя на голову вперёд обгоним пока 😏
@@thekotfather полностью согласен. Даже сейчас уже залететь с нуля не так просто. Через год вообще будет пропасть между новичками и опытными.
@@user-yl1rd4mg7eлибо выкатят десктопную и понятную платную аппку в которой будет всё сравнимо с видеоредактором или же интегрируют в редакторы с паттернами поведения и всё
@@thekotfather ага, в бета тестировании )
@@user-yl1rd4mg7e скорее всего оно упростится для обычного пользователя, как уже это происходит со сборками
Круто, спасибо за обзор, надо будет вернуться на бусти.
Лайк до просмотра! Доверие 100000000000000%
интересно как будет развиваться, буду следить
спасибо
Просто отец, что тут ещё сказать ;)
Опаньки, держи лайк !
Невероятно, невероятно!
Привет, не могли бы вы сделать гайд по установке stable video diffusion
Поддерживаю. Хорошо бы гайд по установке и может ещё несколько примеров работы
Вот это крутая штука. Зашёл на гитхаб ничего не понял. Жду инстал в 1 клик =)
спасибо интересный ролик
ждём развития. Идём на бусти донатить!)))
Спасибо за инфу. Ждем прогресса от нейронок)
I like your videos 🤩
Бро ты красавчик 🎉👍
Очень нравится вся ваша работа с пояснениями юмором и конечно же раздачей инсталлов, подскажите где посмотреть что за нейронка с фрименом, кроме как на бусти?
отлично
Прогресс
Надо запустить её на колабе
Будь моим отцом 😂
Карасава! Хочу! Бегу на бусти)
так. походу на бусти об этом еще ничего нет или я просто на нашла? и что именно оплачивать? не вижу конкретно кнопки "эксклюзив". печаааль((
Просто подпишись и получишь сразу доступ ко всему.
Нейронку соберу в ближайшее время.
@@XpucT просто подписалась) когда будет нужная сборка - там наверное и нужная кнопка появится, чтобы целенаправленно тыцнуть, надеюсь))
момент с гипнозом угарище))))
Лет через 10 все популярные книги будут нейронками превращены в видео. VR-видео. Через 30 лет, любому будет доступно сказать нейронке чтобы она нагенерила альтернативную концовку сериала "игра престолов".
через 30 лет ты сам снимешь дома на кухне любой Аватар или Игру пристолов
Будем ждать развитие модели, и модель Deliberate для видео!
Спасибо Вам за видео! Да ещё так оперативно! Скажите, с 12 гб видеопамяти не стоит даже лезть в Video Diffusion? Просто если дело только в скорости работы, то я готов ждать)
я бы подождал некоторое время, может появится ограничитель потребления памяти
Ура видео нейронка
Подскажите кто то нашёл или разобрался как ставить эту версию stable video diffusion? Может туториал какой то есть или кто то уже придумал что то другое?
Готов скинуться на версию для коллаба!🥳
Такими темпами в скором сделают браузер на базе нейронки, где все сайты будут генерироваться нейросетью)
Ты очень далек от понимая того как работают сайты и нейросети, да?
16гб памяти, расходимся, работяги.
Как ты исправил ету ошибку? Появляется при втягивании картинки и не появляются крутиляторы (
File "C:\Users\VoVchic\anaconda3\envs\genModelVideo\lib\site-packages\streamlit
untime\scriptrunner\script_runner.py", line 534, in _run_script
exec(code, module.__dict__)
File "W:\stablee-video-deffusion-a\generative-models\video_sampling.py", line 137, in
img = load_img_for_prediction(W, H)
File "W:\stablee-video-deffusion-a\generative-models\scripts\demo\streamlit_helpers.py", line 848, in load_img_for_prediction
return image.to(device) * 2.0 - 1.0
File "C:\Users\VoVchic\anaconda3\envs\genModelVideo\lib\site-packages\torch\cuda\__init__.py", line 239, in _lazy_init
raise AssertionError("Torch not compiled with CUDA enabled")
такая же хрень и ничего не пашет
Подскажите пожалуйста, та нейросеть которая повторяет за вашим лицом как называется? есть ли она у вас в бусти портативная? и будет ли работать на 4гб видео или надо обновлять карту?
Вот как действительно можно было бы народ заинтересовать - показав, что могут делать "э гёрл-ы" в анимации. Но с котом - и на том спасибо
Привет, как думаешь на видеокарте от amd это будет работать?
Программеры такие молодцы , сами себе клепают замену ;) скоро сеть сама все будет программить и развивать сама себя и сама о себе клепать ролики :)
На их век- денег хватит, не переживайте. 😄
@@user-uj4jn6gp1r она с такой скоростью развивается....мм.....век это слишком оптимистично звучит.
Всем Привет, подскажите как в окне генерации сделать чаще частоту отображения ходов картинки, а то вижу муть а потом финальный результат, где-то видел как это настраивать и всё забыл как и где смотрел😅
"минимальные требования к этой модели 16 vram"
я с восьмью...💀☠
У тебя еще много
Как сможете делать анимацию, разбудите, пожалуйста. Или хотя для комиксов - серию картинок с одинаковыми лицами и одеждой.
правильно создали )))
Кот прыгает на шкаф через стул
Создали - правильно.
🎉
правильно создали🗿🗿🗿
zigma zigma
Вчера как раз думал о том, можно ли нейроново сделать спрайтовую анимацию
Я в этом отношении очень жду нейронку Animate Anyone
То что показали впечатляет, но пока нет даже демо
🤯
👍
Подскажите, я так понимаю, ограничения в 4 секунды пока не обойти?
Хачатур, привет. Мне бы очень хотелось узнать каким образом ты делаешь музыку в Audiocraft как на заднем фоне помню ты говорил в подкасте на канале NEUROMANIA. Я знаю что у тебя руки не доходят разобраться, я всё понимаю.
Он показывал на бусти, два раза причем)
@@syleront рано или поздно денежку найду. Туговато с финансами к сожалению(((
А оживить человека с фото сможет интересно? Например старинное фото, что бы например наш прадед двегился как-то, повернулся боком?)
DragGAN погугли.
она сложная пока, не дозрела. и это с фото только@@maraderchikXD
@@ultimateiks89 ну анимация это просто последовательность изображений.
Ожидание: Искусственный интеллект заменит людей в большинстве профессий и в итоге захватит мир
Реальность: Оживляем, крутим, двигаем прадеда
завтра мошенники будут звонить по видеосвязи
Будет одна башня под компьютер и вторая чисто для видеокарты.
Жесть, ну похоже, это новый шаг
для мошенников теперь будет доступна видео связь
Будет какой ни будь комментарий о Fooocus ?
А как называется нейронка, которая тебя в Моргана Фримана превратила?
только фон у Моргана тенется за головой
привет всем, а на 4070 тестил кто то на 12гб будет работать или ошибку вываливает?
Получилось запустить на 3060 12гб, поднимал через комфиюай.
Съедало как правило не более 9-10гб.
Так ведь КомфиЮАЙ это просто интерфейс каким образом это всё магическим образом оптимизируется?
@@dmitriidak Комфиюай вообще не влияет на это. Просто указал что, запускал через неё.
У меня даже 10гб из 12 не используется для 960 на 544.
@@dmitriidak Явно где-то косяк в его сборке, нейросетка столько не ест.
@@dmitriidak Есть ещё варик. Возможно что-то от всей сетки остаётся в озу.
@@flashback6836 интересно🤔, а по какому тутору запускал? https убери из ссылки, чтобы автор коммент не удалил
Представляю что будет лет через 10
спасибо за видео.
У меня все настроено, но процесс генерации по какой-то странной причине занимает 4 часа на видео.
У меня RTX3090, так что должно быть быстрее.
Надо ждать 5090 чтобы получше было
@@dios9168 Оптимизацию быстрее выпустят, 5090 еще не скоро будут готовы.
Здрасти, а что ни-будь слышно про Posex, или есть какие может аналоги работающие корректно?
t.me/win10tweaker/399
Вау вау Хчо помедленнее, дай переварить 😆
А положение камеры задавать можно тут или только то, что нейронка сама покрутит?
Пока что сама
Прошу прощения, а как ее запустить? В архиве не нашел батника, как в SD.
надо обновить пк)
А будет ли это работать больше 3-4 секунд, например до 1 минуты видео?
(напишите скрипт) запустите х-раз по пол часа каждый раз скармливая последний кадр
либо арендуйте мощности голливудских студий по обработке видео фильмов
А как запустить? чет не получается
Хачатур, делай сборку для колаба 💀
Наконец-то Video Diffusion таки выпустили. Выглядит весьма не плохо по сравнению с той эпилепсией что ранее была: th-cam.com/video/G7mihAy691g/w-d-xo.html
Ну это только зародышь, через год думаю будет ребёнок.
В последних драйверах Nvidia вроде если не хватает видеопамяти начинает отъедаться ОЗУ, не? Или мне это приснилось?🤔
Да. Помогло сильно когда родных 12 не хватало для обучения лоры. По факту использовалось около 16.
не даром 128г озу закупил :)
Скорость развития нейронок начинает меня всерьёз волновать
Чет "меееедленноооо" так все ну😁
подождём пока оптимизируют на ресурс видео 6-8 гигов, потому что больше уж сильно персонализированно
Правильно будет создали. Не благодарите
Мне понравился вариант с портабл стейбл дефюжн, скачал запустил...вот круто б и с виде дефюжн так же ! А бусти и тд.. у меня в старане заблокировано и париться с впн лень уж извените..
Пришло время ориентироваться на VRAM 16 ГБ
2:04 создАли
Было-бы круто уже готовое видео обрабатывать покадрово - и обрезать до нужной длины видео - и потом сохранять это всё - в 30 FPS хотя-бы - в стиле INSTAGRAM в формате 1:1, ... из квадрата нарезать кружочки для Телеги -- а телега уже сама научилась делать из квадратного видео Кружочки. - так что в этом направлении развивайте Нейронку Stable Diffusion.
Есть уже нейронки-монтажёры. Ценность этой и runway в том, что генерируют из ничего (+ изображения) видеоряд
Оптимизируют, подтянут FSR, DLSS
fsr\dlss нужен на 2-4к, а всё что меньше сильно портит качество
На реддите читал, что 40 гигов, а не 16. Нвидиа драйвер последних версий может юзать оперативку в качестве недостающей видеопамяти со снижением скорости. У тебя видимо в сумме памяти дохуя, вот и поместилось.
сейчас генерация идет, заняло 15гб оперативки и все 12гб в видяхе 4070ти. Тестовое видео ожидается через 2 часа))
Моя видеопамять 8 ГБ + 32 ГБ системной. Есть шансы?
@@Daumkraft а какая продолжительность видео?
А можно портативную сборку обычного, картиночного, стейбл под амд? Ради такого даже задоначк
При попытке пропатчить портативку по инструкции, стейбл перестаёт работать вообще. А при попытке создания ссылки удаленного доступа проверяет наличие ядер куда и снова ломает стейбл)
16 гигов? А --medvram тут не прокатит?
вот как раз приехала 4090 от палит можно тестить
правильно создали
так скачать - скачали, а как запустить то?
boosty.to/xpuct/posts/20eecbe3-625b-4b80-be8e-6cd78ca9758d?share=post_link