ฝัง
- เผยแพร่เมื่อ 30 พ.ค. 2024
- В этом видео разбираю практические применения новой функции нейросети Stable Diffusion: IP-Adapter. Благодаря ей можно задавать стиль генерации, используя любую картинку вместо промта. Только представьте, сколько всего с этим можно сделать!
Установка Stable Diffusion: • Stable Diffusion Porta...
IP-Adapter: huggingface.co/h94/IP-Adapter...
Телеграм-канал студии ITSALIVE - t.me/itsalive_live
Телеграм-канал школы - t.me/itscool_blog
Таймкоды:
0:00 Вступление
0:48 Установка
02:02 Генерация по картинке
03:38 Замена деталей на портретах
05:36 Логотип в любом стиле
07:10 Арт с объемными буквами
08:49 Стилизация фото
09:43 Постер Mortal Kombat
11:30 Постер в стиле 80-х
12:50 Лицо знаменитости в любом стиле
13:40 Заключение
![Mirrr x BUS5 - กี่เหตุผล (1000REASONS) [Live Session]](http://i.ytimg.com/vi/6Ta00hFr2qU/mqdefault.jpg)
Спасибо большое!!!! Неделю разбираюсь почему не работает IP-Adapter!!! Не кто из "великих умов" на ютубе не сказал что нужно переименовать расширение из "bin" в "pth"!!!!!!!!!!!! И в инструкции по установке, на хагинфейс, я этого тоже не заметил!!!!! Чуть комп не разбил, 100 раз все снес и переустановил!!!! А тут такое простое решение, и все заработало!!!!!!!!! СПАСИБО!!!!!!
Спасибо за классное расширение!!!! И за детальный разбор.
Большущее спасибо тебе за демонстрацию и усердный монтаж с подрезкой всех пауз и воды.
Сам монтирую, знаю, насколько это запара.
Под конец ты забыл отключить Depth, возможно это портило результат.
Вообще автогенерация карты глубины препроцессором работает довольно слабо, особенно на генеративных картинках или рисованных с условным светом. Я смотрел результаты в 3д. Это скорее похоже на сегментирование плашек по глубине сцены. То есть хорошо для плановости и подсказки, но плохо для построения света/формы
Вот для стилизации крупных объектов с контурами или картой глубины реально хорошо работает. Правда я пересел на Comfy UI, но разберусь.
Наконец кто-то оценил обрезку пауз! 🙏
Насчет Depth, если стремиться к идеалу, то да. согласен. Но в отличие от Open Pose он нравится тем, что может дать какие-то интересные творческие результаты, или можно с фоном играть, быстро редактируя инпут в фотошопе и загружая его заново в ControlNet.
Это очень круто! Кирилл, спасибо, что поделился
Очень круто, спасибо, Сайтама
Классное видео и информация! Спасибо что поделился!
Ввввввау! Вот это то, чего не хватало)) Большущее спасибо!
Это именно то, что я искал! Огромное спасибо!
Спасибо большое за видео, как раз искал возможность экспериментировать со стилями нишевых художников, токенов которых нет в общей модели
Спасибо, крутейшее видео по Stable Diffusion
Очень упрощяет процесс, спасибо!
Обалдеть! Спасибо за крутой рабочий инструмент!)
Старославянский стиль)) это ар-нуво, Билибин. Очень интересное видео, то что нужно! Не генерировать а вставить уже существующую картинку
Точно, спасибо!
Хотя, как известно, стиль Ар-нуво создали старорусы в честь победы над ящерами 😁
Славянин, ты ар-нуво знаешь, а своего не знаешь ни грамма.
@@user-ie2kb1vf4s …кто здесь?🧐
тогда уж "ни пуда не знаю" 😁@@user-ie2kb1vf4s
@@itsalive.studio Отличное замечание! Спасибо!)
Это бомбически здорово!!! Спасибо!!!
Огромная благодарность за подробный гайд! )
Очень круто, спасибо за ценную информацию
Супер! Про то что не заменят, уже заменяют. Вовсю поступают заказы на генерацию изображений и не только.
Топовый разбор! Спасибо, что поделился
Охренеть! Сколько я спала! Юзаю стейбл бог знает сколько, и только сейчас узнала об этой штуке! СПАСИБИЩЕЕЕЕЕ тебе добрый человек!
Огонь, надо тоже затестить)
Шикарно! Лайк и подписка) Жаль, что очень высокие требования к железу для такой забавы...
Очень интересно. Можно более подробно касательно установки всего необходимого. Вроде все сделал как у тебя но не хватает вкладок в controlnet/ есть только controlnet unit 0. controlnet unit (IP-Adapter) нету , при generate при любом раскладе выдает какие то ошибки. Сделай пожалуйста все с нуля , всю последовательность , я думаю не один такой нуб который будет тебе благодарен.
У меня вообще игнорирует изображение(
Супер. Благодарю!
Круто в умелых руках! Спасибо за видос!
Это просто безумие! Как же он хорош!
Это капец как круто!
Спасибо, братик. До этого смотрел запутанный тутор на английском, где используется SDXL и карта 4090, в итоге нифига не понятно было 😃
При использовании Canny и IP Adapter на 6:16 при генерации выскакивает ошибка TypeError: 'NoneType' object is not subscriptable - как бороться? Повторное нажатие на Generate мне не помогло.
Решается перезагрузкой SD
@@itsalive.studio 3 раза перезагружал, ошибка остаётся.
Короче разобрался, надо перейти в режим txt2img, на ролике, после генерации видно, что уже другой режим выбран :)
@@user-ee6jd2fr2p да, запутал всех )
Мне нравится что ты рассказываешь с точки зрения дизайнера, как легко применить нейросети в реальных повседневных проектах, когда времени в обрез и нужен 100% быстрый, предсказуемый и адаптивный результат. Спасибо)
Круто!
Спасибо
Просто ультимативная фича. Спасибо огромное!
Это что-то невероятное! Те редкие моменты, когда ютуб рекомендует бесценные вещи, применимые в повседневке...Оч крутая штука, уже вовсю играюсь с параметрами) Сразу же лайк, подписка, просмотры 🤩
Здравствуте, вы уже пользуетесь этой програмой?
Отличный видосий, все четко без воды и с примерами. Люблю смотреть про интересные фичи в СД, побольше бы таки видео.
круто, полезно )
Огромное спасибо за то, что поделились! Очень понятно объясняете! Всё по делу:)
спасибо, очень полезно
класс! Спасибо!
Молодец!!! Все по делу)
🩷 инфа пушечка
Классное видео. Не знал, что Моргенштерн в нейросетях шарит.
Спасибо
А лысый ШАРИТ!))) Спасибо! Подписался!
Подписался, лайк за информацию!
спасибо ,скрольте медленней плиз не все настройки при такой скорости видны ,даже стоп кадр не помогает-) просто не всегда вроде бы явные настройки возможно подобрать самому,что-бы добиться такого-же результата ,слишком много настроек не явных
Респект!!!
И это собственно причина, почему Адоб сейчас нагоняет суету по запрету инструментов переноса стиля) Но, конечно, не для своего файрфлай, ведь у них православно, а остальным нельзя)
Мир нейросеток становится все больше похож на продуктовый магазин) технологии всем доступные, но чтобы потребитель "брал" твой товар надо развивать и доказывать экспертизу в одном направлении. Макароны покупаем у одного производителя, а молоко у другого.
Спасибо огромное за такой понятный видео урок! Благодарю!
Очень круто! Давно использую ControlNet, но на IP-Adapter не обращал внимания :)
Вы уже умеете пользоваться этим адаптером?
@@user-ys1tj1wq4b Да, научился уже.
Очень показательно: те, кто продает курсы по рисованию и дизайну "от руки", говорят, что нейросети не заменят вас на работе, а те, кто продает курсы по нейросетям, говорят, что заменят.)
Заменят.Просто сократится количество тех, кто рисует от руки, Нужен будет один промпт- инженер и парочка фотошоперов
Класс! Благодарочка! Но насколько я знаю есть определенные требования по установке, память должна быть не менее 1ТБ
10 гб достаточно, отслальное уже модели. У меня папка весит 90 гб сейчас
Топ!
какая-то магия началась
чётко ！
Шикарная тема. Правда с лого не заработало. Буду дальше копать
Еееу крутейшэнъ 🎉
Наконецто Морген побрился свел тату и занялся нейросетями
Забыл только прическу через SD себе сделать.
Я бы немного поправил. 1. Не появляется "желанный IP-Adapter" он там и так есть после установки ControlNet, а появляются дополнительные модели IP-Adapter. 2. Я например в версии AUTOMATIC1111 ничего не переименовывал в ".pth" закидывал в ".bin" и всё принимает 3. На день 08-01-2024 при скачивании моделей IP-Adapter, они есть и в ".bin" и в ".safetensors" У меня принимает в обоих видах. Переименовывать не пришлось. И ещё вопрос: Для кого эти видео, что так спешите быстро рассказать?
Круто🔥, спасибо❤, побежала изучать
Не завелось, к сожалнию. На маке говорит typeError: Trying to convert Float16 to the MPS backend but it does not have support for that dtype.
Странно, на гитхабе написано что модели надо кидать в "stable-diffusion-webui\extensions\sd-webui-controlnet\models"...
great tutorial, i could follow even without understanding your language
Thanks a lot! Hope we'll figure out some automatically generated subtitles next time.
@@itsalive.studio yeah good idea
Полезно, спасибо!
привет!
есть ли вариант установить портбл SD с нейронкой IP-Adapter на mac os?
Магия)
красава просто...
Привет!
Есть вопрос про скорость работы с IP adapter.
При одинаковых настройках и промте, при включении этой опции рендер замедляется в 10 раз.
Работаю на 4070ti.
В чем может быть проблема?
Заранее спасибо.
😍
а еще быстрей можно мышкой бегать? Тогда совсем здорово будет для понимания
к сожалению, зависит видимо от чекпойнтов: некоторые вообще нисколько не подхватывают стиль, а смешивают картинки с КН ... В ряде случаев промт приходится прописывать. Также нередко приходится снижать вес воздействия модели. Но за обзор огромное спасибо! вы мне дали новое знание наглядно, побудили к практике!
Нужно ли скачивать все 4 модели адаптера (в т.ч. лайт) или достаточно лишь плюсовые? я поставил только плюсовые (фейс и не фейсовую)
Конечно есть нюансы) Но как только Adapter "цепляет" то, что тебе нужно, дальше уже дело техники. Гораздо меньше рандома и энтропии получается. Модель Light вообще не использовал, остальные в разных ситуациях хорошо себя показывают.
да это же кликбейт на новичков, промт всегда нужен, иначе чаще всего невнятное что-то получится или то, что не нужно
Кликбейт для новичков - это если бы я написал "стиль без промта" и предлагал для этого использовать микс мод в миджорни)@@aprichnik1044
Спасибо большое за видео! В графе model кроме none ничего нет( Переустановка stable diffusion не помогла. Как быть?
если нажать кнопку обновить (справа от окна), они появляются. Но у меня ничего не работает все равно. Он не видит референс вообще почему-то.
Спасибо за видео! Подскажите, а Вы сознательно не используете Pixel Perfect? Если да, то по какой причине?
Нет, он ничего не дает в плане генерации, иногда жмакаю по привычке
Здравствуйте! В имг имг в вашей версии отображается изображение у контрол нета. В версии которой я работаю, изображения контрол нета не отображаются в инпайнте и имг имг, как вы думаете это связано с версией или есть какие то настройки контрол нета?
галочку надо нажать Upload independent control image
Я установил по видео в описании, но там каке-то модели нужны которых нет. Как открыть программу? Она что в браузере открывается?
ip-adapter preprocessor у меня не показывает, почему? Где его взять?
у меня почему-то не работает ip adapter, Error running process: D:\Stable-diffusion\stable-diffusion-webui\extensions\sd-webui-controlnet\scripts\controlnet.py
пишет это, может кто знает. Очень грустно терять такую функцию
У меня тоже самое. Как то решили эту проблему?
Лайк и подписка. Просто охеренно!
Хорошее видео 👍
Ооочень быстрый скролл, очень трудно засечь все настройки. На примере с встраиванием логотипа в бг с большими трудами на стопкадрах выставил все настройки, в итоге при генерации выдает TypeError: 'NoneType' object is not subscriptable (((
Короче разобрался, надо перейти в режим txt2img, на ролике, после генерации видно, что уже другой режим выбран :)
Выдаёт ошибку raise [ControlNet Error] Cannot recognize the ControlModel!' TypeError: exceptions must derive from BaseException.... ищу решение. Если кто знает, как пофиксить, подскажите.
Как установить ip adapte? Только скачать 4 модели и все или, что-то еще нужно сделать? Потому как выдает все время ошибку
p.s. В-общем установил все с нуля и все заработало! Спасибо за видео.
Привет! не подскажешь, есть ли сейчас аи, которые могут добавлять объекты в видео чтоб это выглядело не как фотошоп? ну то есть если допустим, лежит какая-то вещь, и если на неё что-то наложить будет видно что не естественно выглядит... было бы круто как-то наложить бутылку/кружку или другой объект, чтоб оно выглядело походу видео как будто оно там изначально было
Из ближайшего есть Wonder dynamics, там можно персонажей добавлять или менять человека на персонажа
в миджорни есть режим микса, но это лучше, так как управляемо
3:00 - Круто! Но какой в этом практический смысл? Качество генераций всё равно ведь непотребное.
У меня почему-то не работает(( кидаю картинку, а он не берет референс с нее
Чётко, внатуре могёте!
У меня выдаёт ошибку TypeError: 'NoneType' object is not subscriptable
Закачал и переименовал 4 файла, но сам IP adapter не появляется в списке, где кружочки и нужно на кружочек нажимать, чтобы выбрать его. Что делаю не так?
Спасибо 🙏 очень круто 👍🏻 интересно на амд проце с нативной графикой это будет работать?
пишут что только на самых мощных поддерживается
Нужна помощь, вроде все норм установил, фотки завидую, а он мне какие-то решётки рисует ( хрен поймеш что
Спасибо за урок! Мощный инструмент! Что делать если depth не срабатывает? Canny работает отлично
depth больше по обьемам, canny по контурам
А почему по ссылке есть файлы safetensors это они для чего?
Сколько шагов надо написать чтобы красивый арт был?
делаю все по инструкции, но в момент когда надо сделать одну картинку в depth а другую в ip adapter - ничего не работает(( в модели depth пусто, препроцессор depth_midas, а в модели только ip adapter, хотя у вас в видео стоит тоже какой-то depth. что делать в этой ситуации?
нажми справа модели обновить кружочек
а на мак ставиться стейбл?
Интересно, но у меня не получилось - не увидел Контролнет препроцессора к модели. Может у меня Контролнет поломался хотя другие модели работают
Мб controlNet старая версия
@@KirillLovesMona 1.1 версия. Может это под SDXL? и на 1.5 не работает?
В начале нужно подождать пока 2,5 гб clip view препроцессор скачается, в консоле можно посмотреть как он подгружается@@user-qy7pd1qi8o
Расскажи пожалуйста, как дела обстоят на Маке? Можно ли запустить SD не через DiffusionBee. И можно ли через DiffusionBee подключить ip-adapter? или без винды все же никуда? )
На маке своя отдельная история, не копал в неё пока что
в целом все так же, гуглите Installation on Apple Silicon
А где взять ваши модели для depth? Depth midas есть, но моделей таких нет.
Они сами должны подгрузиться при первом запуске препроцессора, либо в ручную через GitHub скачать huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
Будущее уже здесь
Хотелось бы посмотреть ролик где можно вписать лицо со своей фотографии в другую картинку. Это возможно с IP-adapter?
Для этого есть штука под названием "roop", но не у всех она запускается)
Эй ты красаучик!!!!