【原神RVC】AIに歌わせる方法・喋らせる方法【GenshinImpactRVC】
ฝัง
- เผยแพร่เมื่อ 7 ส.ค. 2024
- ご視聴ありがとうございます！ぜひチャンネル登録とSNSのフォローをお願いします。原神・スターレイルの生配信と動画投稿を行っています。
Twitter
/ hungry_olive
ツイキャス
twitcasting.tv/olive_olivin
TH-cam
/ @mitaraiasobu
TikTok
/ hungry_olive
① .wav .mp3から作る方法で使ったサイト
huggingface.co/spaces/ardha27...
②TH-camを切り抜いて作る方法で使ったサイト
colab.research.google.com/dri...
楽曲 シャイニングスター
• 【魔王魂公式】シャイニングスター
背景画像
commons.nicovideo.jp/material...
現在は神里綾華・ナヒーダ・胡桃・放浪者・魈が使えるみたいです。
中身を見たら万葉や八重神子もいたので、いつか実装されるかもしれませんね。サイトだけではなくソフトもあるそうなので、自分で使ってみて紹介できそうだったらまた動画だしますね～。
0:00 はじまり
0:27 ①.wav.mp3から作る
1:45 ②TH-camから抜き出して作る
3:49 完成した胡桃の歌
4:43 ①と②の比較
【RVCボイスについて】
RVCというAIを使って胡桃の声を学習し、自分の声を録音したものを読み込ませて発音させています。
UTAU人力とは異なりますのでご注意ください。
I use an AI called RVC to learn HuTao's voice and read my own voice and pronounce it.
Please note this will be different from UTAU voice.
実際にRVCボイスの「歌ってみた」を作ってみました！
• 【手描き原神】レザーが強風オールバックを歌っ...
#原神 #genshinimpact #rvc - เกม
私的利用にとどめておきます
めっちゃ似てるすご
ナイスすぎ
すげぇ分かりやすい あざす
すげえ
まじで胡桃じゃん
放浪者に心掴まれた
放浪者ありがとうございます( ´ཫ` )ｳﾞｯ
Ardha desu, nice video 👌
Thank you for your comment Ardha-san!♡
Thank you for developing a wonderful application, this is a very innovative app.
This video explains how to use the app, the rights of voice actors and Genshin Impact, and I gently urge viewers to follow manners and use the app.
I hope everyone enjoy the secondary creation with good manners and morals.👍
海外の人が鍾離のlemon乗っけてくれてたんだけど見れなくなったから自分用で保存する目的です
2の方法を使って自分で歌ったボーカルのみの音声をTH-camにあげて歌わせたいのですが、自分で歌った動画を限定公開等にしてもできますかね...？
コメントありがとうございます！
限定公開の動画ではできないと思われます。
②のサイトの仕組みが「TH-camの動画を分析して声を抜き出す」という方法のため、サイトが動画にアクセスできないと使えません。
誰もしらないアカウントを作って、動画の名前も適当に「ああああ」とかにすれば誰かに視聴されることも無いと思います。ボイスが完成したら動画をすぐ非公開にしたり削除したりすれば良いと思います。
どうしても気になるのであれば、歌を20秒くらいに分割して①の方法でやるのが一番安心ですね。
２番についてなのですが、曲を複数カバーさせることができません。（綾華に群青とアイドルを歌わせるなど）手順どうりにやっているのですがseparateに曲名の入ったファイルが追加されないという状況です。できればハングリー様はいつも複数曲の際どのようにしているかなど教えて頂きたいです。
コメントありがとうございます！
2:10 私の場合は「ランタイム」→「ランタイムを接続解除して削除」を押してから作業を開始することで解決したケースがあります。
もしかして、2曲同時に処理しようとしていますか？使用上、2曲同時は出来ません。
アイドルをTH-camを切り抜き→綾華に歌わせる→完成したものをダウンロード→ランタイムの接続解除→群青をTH-cam切り抜き→綾華に歌わせる→完成したものをダウンロード
という流れで作業してくださいね！
まだ解決できない場合はもう一度コメントしてください🙏
なるほど！！ありがとうございました！！
助かりました～
@@418_Im_a_teapod 解決して良かったです！楽しんでくださいね～✨
2:53の２つのリンクがないです...最後のinput audiopassが入力できるサイトのリンクを直接いただくとかできますか
①のやり方で、原神の他にも配布されているモデルとかはありますか？
コメントありがとうございます！
Ardhaさんのサイトには原神のキャラクターしかいませんでした。
他の方のサイトで良ければ、【rvc model huggingface】と検索すると色々出てきます！
原神以外のモデルも権利を侵害しないように、不適切な言葉を喋らせたりはせず、非公式であることを明記しましょう！
質問失礼します🙏🏻
②のふたつあるURLの1番下を開こうとしても「現在実行中のインターフェースはありません」と表示されます…エラーなんでしょうか……
コメントありがとうございます！
URLを開くときにタブを削除してしまうとそのように表示されることがあります。パソコンの場合はURLを右クリック、スマホの場合はURLを長押しして「新しいタブで開く」を押してみてください。
それでも上手くいかなかった場合は「ランタイム」→「ランタイムを接続解除して削除」を押してから最初からやり直すと上手くいくことがあります。
それ以外の方法は私では思いつかないため、解決できない場合は他の方に尋ねてみてください💦
ボーカルのみのTH-camのやつを使えばオリーブさんが歌ったのと同じ見たくなりますかね？
コメントありがとうございます！
はい、楽器無し・歌声だけのTH-cam動画があればほとんど同じものが出来ると思います！
②は今できますか？二つの方の下のリンクが出ないのですが‥
皆様コメントありがとうございます！皆様からの質問への回答をまとめました。
ちなみに、こちらにRVC動画をまとめています！
th-cam.com/video/YOxNC69OyNM/w-d-xo.html
多くのエラーは「ランタイム」→「ランタイムを接続解除して削除」を押してから作業を開始することで解決することがあるので、試してみてください！
0:27 ①の場合は20秒以上の音声は出力できません。
1:45 ②の場合はTH-camの音声が適していない場合があるので、他の動画を試してみてください。
2:10 ②の場合は「RVC-Song-Cover」を起動している状態じゃないと動作しないため、タブを削除すると動きが止まってしまいます。タブを消さずに作業してください。②で起こる多くの問題は「ランタイム」→「ランタイムを接続解除して削除」を押してから作業を開始することで解決したケースがあります。
Q.②をスマホでやるとファイルマークがありません、どこにあるのでしょうか？
A.左上の三本線から「ファイルブラウザを表示」を押すと出現します！
もしくはWebアプリ(ChromeとかSafari)のメニューを押して「PC版サイト」「デスクトップ用サイト」みたいなボタンを押すとパソコンと同じ画面になるので、私と同じ場所にファイルが表示されると思います！分かりやすい方でやってください👍
Q.②で複数の歌を作るにはどうしたらいいですか？例えばアイドルと群青を神里綾華に歌わせたいです。
A.もしかして2曲同時に処理しようとしていますか？仕様上、2曲同時は出来ません。
アイドルをTH-camを切り抜き→綾華に歌わせる→完成したものをダウンロード→ランタイムの接続解除→群青をTH-cam切り抜き→綾華に歌わせる→完成したものをダウンロード
という流れで作業してくださいね！
Q.②で処理を開始してもvocal.wavがないです。
A.声が高すぎる・低すぎる場合は上手くいかないことがあります。
・雑音が多すぎたり、そもそも人間の声じゃない場合は出力できません。ボカロなども失敗することが多いです。
・「ランタイム」→「ランタイムを接続解除して削除」を押してから最初からやり直すと上手くいくことがあります。
・待つ時間が短い可能性があります。動画ではカットしているのですが本当は5分以上かかっています。パソコンやスマホのスペックによって処理に時間がかかることがありますが、左側でクルクルしていたら大丈夫なはずです。
・お使いの機器では動作しない可能性があります。別の機器で試して解決した方もいるのでお試しください。
・再生リストに入っている動画のURLを使うとファイルが出てきません。動画内の方法でURLを変更してください。
Q.②で自分が録音した歌でやりたいのですが、TH-camに自分が投稿した「限定公開」の動画は使えますか？
A.限定公開の動画ではできないと思われます。
②のサイトの仕組みが「TH-camの動画を分析して声を抜き出す」という方法のため、サイトが動画にアクセスできないと使えません。誰もしらないアカウントを作って、動画の名前も適当に「ああああ」とかにすれば誰かに視聴されることも無いと思います。ボイスが完成したら動画をすぐ非公開にしたり削除したりすれば良いと思います。
どうしても気になるのであれば、歌を20秒くらいに分割して①の方法でやるのが一番安心ですね。
Q.シャウトボイスやビートボックスは出きますか？
シャウトボイスは出すには出せると思うのですが、音がかすれ気味になるかと思います。
また②TH-camから切り抜く方法は、シャウト部分が楽器と混ざって上手く切り抜けない可能性が高いので、声だけのデータでやるのをお勧めします。
ちなみにビートボックスはできました🤣実際のビートボックスの音声を使っても良いですし、カラオケ音源でもビートボックス風になります。
Q.これは人力ですか？
A.これは「人力」ではなく「RVC」といいます。
人力はキャラクターの声を人の力で切り取り・繋ぎ合わせて作った音声です。
RVCはキャラクターの声をAIの力で切り取り・繋ぎ合わせて作った音声です。
全く別の物なので、記載する際はご注意ください。
原神以外のキャラクター、スターレイル等のキャラの素材を探しているのですが、探せなくて困ってます。
どう検索したら良いかご存知でしたらご教授ください。
男性の声で女性キャラクターのボイスに変換しようとするとめっちゃガラガラになってしまうんですけど、どうすればいいですか？
①②どちらの方法でも、音声変換前に声の高さを上げることが出来ます。音声をInputしたら、右側にTransposeという枠があります。その枠で声の高さを変えられます！
男声から女声にする時は12
女声から男声にする時は-12
あくまで目安なので、ご自身で調節されてみてください。上手く行きますように🙏
他のアニメは可能ですか？
Ardhaさんが公開されている物は原神だけですが、他の方が別のアニメの声も作っているかもしれません！
Huggingface RVC ○○
○○のところをアニメの名前やキャラの名前にしてGoogle検索してみてください✨
質問失礼します。2:53の２つのリンクが出てこないのですが、どうしたら良いでしょうか。
同じく泣
2:54 リンクを押した後、サーバーエラーと出てしまいます…
質問失礼いたします。
2:34 にしばらくとありますが5分ぐらいの音楽は結構かかるものなんでしょうか？
10分ほど待ちましたがhtdemucsから下のwavがでません。
くるくる回っているので動いてはいるみたいです。
コメントありがとうございます！
私のパソコンでは3分の歌で5分くらいかかりました。パソコンのスペックや歌の種類によっても変わります。クルクル回っていれば大丈夫なはずなので気長に待つか、ランタイム→ランタイムの接続を解除して削除 を押してから作業をやり直すと上手くいくかもしれません。
お使いのパソコン・スマホで正しく動作するかを確認するために、別の曲で試してみてください。ちなみにボカロは上手くいかないことが多いです。人間が歌っているものでやってみてください。
@@MitaraiAsobu
返信ありがとうございます。
スペックはi7ですがなにぶん4-5年前のﾉｰﾄですのでmsiではありますが旧世代pcかと・・・
ランタイム接続、削除は試しましたがやはり変換が終わりません。
取合えず先ほどから1時間程やってみましたがダメでした。
また、同じ曲ですが別のリンクでも試したのですが変わりませんでした。
(古い曲ですが人間が歌っています。)
いつもRun Web/Gradioで止まります
Colab での使用量上限に達したとメッセージが出てgpuが使用できなくなったのであきらめます。
@ハングリーオリーブ
すみません。スマホでやったらできました。
スペックなのかどうかわかりませんがありがとうございました。
@@user-io2jd6jq8h 解決できて良かったです！楽しんでくださいね👍
@@MitaraiAsobu
どうもお騒がせいたしました。
シャウトボイスはだせますか？
コメントありがとうございます！
シャウトボイスを出すには出せると思うのですが、音がかすれ気味になるかと思います。
またTH-camから切り抜く方法は、上手く切り抜けない可能性が高いので、声だけのデータでやるのをお勧めします。
ちなみにビートボックスはできました🤣
実際のビートボックスの音声を使っても良いですし、カラオケ音源でもビートボックスになります。
inputの音声は入れれるんですが、outputの音声が入れられません。
20秒を超えてはいないです。
スマホとPCどちらでやっても無理でした。
コメントありがとうございます！
Inputに音声を入れたら、その下の「Generate」というボタンを押してください。処理が完了するとOutputからダウンロードできるようになります。
Inputは「入れる」Outputは「取り出す」という意味です。Outputには音声を入れません。
すみません、➁の方法でやってるんですけどどうしても最後のurlが出てきません💦1番下に行って右にスクロールしてもないです、どうすれば良いでしょうか？
2:50 最後のURLは、Run Web/Gradio という項目に入っています。
もしRun Web/Gradioという項目が無ければ、まだ作業途中なのでもう少し待ってみてください。
もしRun Web/Gradioという項目があれば、もしかしたら▲三角マークの中に隠れているかもしれません。▲三角マークを押してみてください。
それでも上手くいかなかった場合は「ランタイム」→「ランタイムを接続解除して削除」を押してから最初からやり直すと上手くいくことがあります。
それ以外の方法は私では思いつかないため、解決できない場合は他の方に尋ねてみてください💦
@@MitaraiAsobu わかりました！やってみます💪
質問です②のファイルが出てきませんのですが、どうすれば良いでしょうか
コメントありがとうございます！
vocal.wavのことで合っているでしょうか？
・動画が適していない場合があります、他の動画を試してみてください。特に、ボーカロイドなどはできません。
・「ランタイム」→「ランタイムを接続解除して削除」を押してから最初からやり直すと上手くいくことがあります。
・待つ時間が短い可能性があります。動画ではカットしているのですが本当は5分以上かかっています。
・お使いの機器では動作しない可能性があります。別の機器で試して解決した方もいるのでお試しください。
・再生リストに入っている動画のURLを使うとファイルが出てきません。動画内の方法でURLを変更してください。
私ではこれ以上の解決方法は思いつかないため、解決できなかった場合は他の方にご質問ください。
上手くいくことを願っています🙏
出来ましたありがとうございます
質問失礼します最後エラーになってしまうのですがどうすればいいのでしょうか？
たとえば、声が高すぎる・低すぎる場合は上手くいかないことがあります。雑音が多すぎたり、そもそも人間の声じゃない場合は出力できません。ボカロなども失敗することが多いです。またパソコンやスマホのスペックによって処理に時間がかかることがありますが、左側でクルクルしていたら大丈夫なはずです。
0:27 ①の場合は20秒以上の音声は出力できません。
1:45 ②の場合はTH-camの音声が適していない場合があるので、他の動画を試してみてください。
2:10 「RVC-Song-Cover」を起動している状態じゃないと動作しないため、タブを削除すると動きが止まってしまいます。タブを消さずに作業してください。また私の場合は「ランタイム」→「ランタイムを接続解除して削除」を押してから作業を開始することで解決したケースがあります。
もし上記の方法で解決しなかった場合は、以下の質問に答えていただけるともっと良い解決方法が分かるかもしれません！
① .wav .mp3から作る方法と②TH-camから切り抜いて作る、どちらの方法でエラーが起きましたか？
それと「最後」というのは、胡桃や綾香などキャラクターの画面で出力している時のことですか？
エラーの時に英語や中国語で文章が出てきていたりしたら、その文章を教えてください。
ちなみにスマホではやったことが無いのでスマホの場合は分からないかも知れません。
そして私は専門家ではないので確実に解決できるかもわかりません。
上手くいくことを願っています！
丁寧な説明ありがとうございます。私は②を試したのですがTH-camの音声が合わなかったの見たいです。自作の音声だと成功しましたありがとうございます！
@@user-zp9nn2be6j 上手くいって良かったです！楽しんでくださいね～😊
4:09痰絡まった？
完成したあとはどうやってダウンロードしたらいいですか？
コメントありがとうございます！
完成したらOutPutAudioの欄で声を再生できると思うのですが、その右側にある：を押して「ダウンロード」を選択してください。
なんかバックエンドから /content/separated/htdemucs を取得できませんでしたってなるんですけど汗
コメントありがとうございます！
そのエラーは初めて聞きました。どうやら作業に必要なパーツが足りなくて、不具合が起きてるみたいですね。
多くのエラーは「ランタイム」→「ランタイムを接続解除して削除」を押してから作業を開始することで解決することがあるので、試してみてください！
初めてのエラーなので解決方法に心当たりがなくこれ以上の解決方法は思いつきません...。お手伝いできず申し訳ないです(；´Д｀)