[Breaking News!] What kind of software is Stable Diffusion Web UI Forge?
ฝัง
- เผยแพร่เมื่อ 29 ก.ค. 2024
- A new project from the creators of ControlNet and Fooocus has suddenly been announced. It is called Stable Diffusion web UI Forge.
The Stable Diffusion web UI Forge offers Stable Video Diffusion and other features that SD web UI users have been waiting for...
What is Stable Diffusion web UI Forge? Watch this video to get an overview.
Table of Contents
0:00 - Another big news...
0:43 - What is Stable Diffusion web UI Forge?
3:37 - Introduction to ComfyUI (Announcement)
4:13 - The screen is no different than Stable Diffusion web UI
5:12 - Backend side resource management overhaul
6:20 - How to install Stable Diffusion web UI Forge
7:35 - How to use Stable Video Diffusion
8:02 - Extensions
8:51 - That's all for today
Related Links
Stable Diffusion WebUI Forge
github.com/lllyasviel/stable-...
Command to launch Stable Diffusion web UI Forge with Google Colab
gist.github.com/safa-dayo/654...
ComfyUI written in NOTE, a complete introduction
note.com/safa_dayo/n/n1afe900...
Ranking the 10 best Stable Diffusion live-action models in 2023, in order of deepest to deepest in my mind.
• 【ランキング・ベスト10】2023年Stab...
A realistic version of Lenna the White Mage from Final Fantasy 5!
• ファイナルファンタジーの白魔道士をAI実写化...
So easy video generation! Stable Video Diffusion
• 【オススメAI動画生成方法】ComfyUIて...
X
/ safa_dayo
Chichipui
www.chichi-pui.com/users/safa/
#stablediffusion #stablediffusionwebuiforge #aiart - วิทยาศาสตร์และเทคโนโลยี
Stable Diffusion web UI Forgeを触ってみたところ、非常に意欲的なプロダクトであったため急遽動画を作成しました！なるべく沢山の人に概要を伝えたく特徴などをまとめていますが、尺の関係上詰め込めなかった箇所もあります。
より詳細な内容を知りたい方は、ぜひForgeの公式リポジトリのREADMEもご覧になってみてください！リポジトリのURLは概要欄に載せています。
ありがとうございます🎵
さっそく使わせていただいてます。
svdがまだ破綻してしまって設定に迷ってますが他は全体的には気持ちよく生成できました✨
早速使っていただけて嬉しいです！
ありがとうございます！
ありがとうございます。ちょっとStable Diffusionから離れていると、もう新しいものがでて情報を追うのが大変ですね・・・
次から次へと新しい物が出てくるので追うのも大変ですよね😅
近いうちに3月に発表された画像生成AI関連ニュースまとめ、という動画も作ってみる予定なので、ニュースをチェックするという意味で、よろしければそちらもご覧になってみてください！
これから始める人にはお手軽でいいですね。１つ質問なのですが、SVDを使おうとするとエラーが出てしまいました。SVD Checkpoint Filenameにモデルファイルを入れたらいいのでしょうか？また、入れるとするならどこのフォルダに入れると反映されるのでしょうか？
SVD用のモデルは以下のフォルダに格納していただけたらと思います！
stable-diffusion-webui-forge/models/svd
上のフォルダに入れた状態であれば、SVD Checkpoint Filenameに選択肢が出てくると思うので、モデルを選択した状態でGenerateしてもらえたらと思います！
お返事くださりありがとうございます。当方extensions の built inの SVD の中に入れていました。ご指摘のフォルダに入れたら反映されました。手軽にSVDが触れるのは良いですね。更なる進化に期待したいです。@@safa-dayo
情報提供ありがとうございます！
モデルなどはオリジナル版がらコピーして各フォルダに格納して使用したほうがよいでしょうか？
コピーしても良いですし、設定でオリジナル版のモデルフォルダを参照する方法があります！
具体的にはwebui-user.bat内の記述を書き換えることでこれらの設定は行なえます
@AI-studio-music 以下のXの投稿にまとめておいたので、こちらをご参照ください
（スレッドに続く形で拡張機能についても書いていますので、そちらも併せて参照いただくと良いかもしれません）
twitter.com/safa_dayo/status/1755954766335918543
いつも勉強させて頂いています！記載されたforgeのコードをインストール使用とするとディスクの使用量が凄まじくインストールが完了出来ません。チェックするモデル等を減らしてみてcolab pro+使用でT3でもA100でも166Gのディスクでは足りなくなるのですが…教えて頂けると幸いです。
コメントありがとうございます！
Colabノートブック起動時のチェック内容は、どのようなものにチェックを付けていますか？
普段利用していてディスクを圧迫するということはないので、もしかして大量にモデルをダウンロードされているのかなと思い、確認させていただいた次第です。
基本的にこちらのColabノートブックはその時に利用するモデルのみにチェックを付けて利用する形となる想定でいます💡
（👆の私の想定が間違っていたらごめんなさい💦）
返信有難う御座います、先程インストして画像生成してみました。初回はかなりダウンロードモデルを削らないとディスクが削られるみたいでビックリ致しました(汗
色々触って確かめて見ます！
@@sean-dillon34 Colabの場合、実行を終了した時点（ランタイムを破棄した時点）でダウンロードしたモデルなどはすべて削除されます。そのため画像生成時に利用するモデル "のみ" にチェックを付けて起動する形となります。
普段私もColabを利用する場合、チェックを付けるモデルは１つ、多くて３つぐらいです。
沢山チェックを付けて起動してしまうと、起動のみで相当時間かかると思うので、上に書いたやり方を参考にしてもらえたらと思います！
> 色々触って確かめて見ます！
はい、ぜひ色々と触ってみていただけたらと思います！
3090だと、--allways gpuとxformersを追加したらめちゃくちゃ速くなった
おお！情報共有ありがとうございます！
わかりやすい解説ありがとうございます！ところで、forgeでmov2movを使ってみようと思ったのですが、生成押しても生成が始まりません。私の環境だけでしょうか？
コメントありがとうございます！
mov2movはまだ試していませんでしたので、後ほど試してみようと思います
ちなみにコンソールにエラーログなどは特に出ずに止まってしまう形でしょうか？
@@safa-dayo 早速のお返事ありがとうございます！私の場合はエラーも何も表示されない形になります😂
@@usk0602 そうなんですね💦 もしかしたらForge側ではまだ上手く動かないのかもしれませんね...😢
mov2movの事例はなさそうでしたが、GitHubのissueを見るとうまく動いていない機能もそれなりにありそうです
いずれにせよ、後ほど試してみますね！
@usk0602 mov2mov試してみましたが、私も同じくエラーも何も表示されないまま止まりますね...
手がかり一切なしの状況で止まるので、これは現状はなす術なしと判断しました😂💦
SDVのモデルはどちらからダウンロード可能でしょうか？？？
こちら
（ダウンロードには必要事項の記入などが必要）
huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1
または、
こちらからもダウンロード可能です
huggingface.co/becausecurious/stable-video-diffusion-img2vid-fp16
Stable Diffusion web UIのModelなどの参照はシンボリックリンクでいいかと！
たしかにシンボリックリンクがありましたね...！
ありがとうございます！
@@safa-dayo いえいえ！
この動画は凄くありがたかったです。
投稿ありがとうございます。
低～高スペックのPC一律大体似た感じの速度で生成できると言う事なのかな
RTX 3060 12G購入検討してたけど🤔迷う
それぞれのGPUごとの実際の速度は手元で動かしてみないと正確なところはやはり分からないので迷いますよね。
個人的には他のソフトを使うことなども考えれば、スペックはまだ盛れれば盛っていたほうが良い気はしますね😄
please can some one help ,,,,,,,,,,,,,,,,,,,,,,,,,Dose it work on AMD
gpu,,,,,,,,,,,,,,,,,,, thanks
Probably, It's possible that AMD may not be supported.
However, the Stable Diffusion web UI documentation also explains how to use it in an AMD environment.
I hope this document will be helpful to you!
(Stable Diffusion web UI, not Forge. However, since Forge is based on Stable Diffusion web UI, there may be some reference to it.)
github.com/AUTOMATIC1111/stable-diffusion-webui/wiki/Install-and-Run-on-AMD-GPUs
Hi thankyou for your kind help, OK I will check it out👍👍👍.@@safa-dayo
なんか、パトレイバー(漫画)のHOSを思い出した。
起動画面のところなどでしょうか？💡
パトレイバーを読んだことがなかったので、チェックしてみます！
@@safa-dayo 違うメーカーで操作も違うロボットの動作を最適化して、同じ操作を簡単に動かせる様にするOS。
作中でも動作効率３０％upとうたってます。
車のギアチェンジを動作と考えた時、
MT操作をAT操作にしてしまう様な物だと思われます。
@@user-su6bj8hx1q そうなんですね！たしかにforgeを彷彿とさせますね。
パトレイバー読んだらHOSチェックしてみます！