هوش مصنوعی دوبله ویدیو نامحدود | ترجمه فایل pdf | تبدیل متن به صدای خودمون
ฝัง
- เผยแพร่เมื่อ 23 ก.ค. 2024
- #aigolden #translate #ai #dubbing
در این آموزش می پردازیم به دوبله فیلم با هوش مصنوعی بدون محدودیت ، ترجمه و زیرنویس ویدیو ، ترجمه فایل پی دی اف و سایر فایل ها بصورت ویس و تبدیل متن به صدای هر شخصی یا صدای خودمون . ابزاری که در این ویدیو معرفی کردیم این قابلیت رو داره که بصورت نامحدود ، ترجمه و دوبله ی ویدیو های یوتیوب و همچنین ویدیوهای موجود در حافظه رو انجام بده. قبل از دوبله قابلیت ادیت تلفظ کلمات هم وجود داره برای کیفیت بهتر . در ضمن قابلیت افزودن مدل RVC برای خواندن و تبدیل متن به صدای مدل مورد نظر وجود داره .
================================
لینک وبسایت هاگین فیس :
huggingface.co
================================
لینک پروژه ای که استفاده کردیم :
colab.research.google.com/dri...
================================
ویدیوی آموزش ساخت مدل صدا :
• آموزش کامل تغییر صدای ...
================================
کانال تلگرام : t.me/AI_Golden
================================
Chapters :
00:00 مقدمه
00:40 گرفتن توکن
02:20 اجرای پروژه کولب
08:49 تبدیل پی دی اف به ویس
10:18 تبدیل متن به مدل صدای دلخواه - วิทยาศาสตร์และเทคโนโลยี
دوستان با عرض معذرت دقیقه 6:00 ویدیو به اشتباه گفتم تیک گزینه Active Voice Imitation رو فعال کنید لازم نیست اونو فعال کنید اون واس زمانیه بخوایم با مدل RVC دوبله کنیم . پس برای قطع کردن صدای ویدیوی اصلی در پایینتر یه گزینه هست به اسم remove previous samples که پیشفرص فعاله و بصورت دستی هم میشه کمش کنیم
سلام موقع دوبله کردن ویدئو سه نفره ارور لایسنس اگیرمنت میده و ویدئو تک نفررو هم کامل دوبله نمیکنه فقط یکم اولشو دوبله میکن __ ه میشه راهنمایی کنین لطفا
Accept the license agreement for using Pyannote 2.1. You need to have an account on Hugging Face
@@user-fn3uu6zy1x منم همین مشکل رو داشتم
بسیار عالیه و کار راه انداز یکسره از تون سپاسگزاری می کنم مرحبا
خواهش میکنم ❤️🌹
ممنون دادا عالی بود
خواهش ميكنم 💗
Thanks 🙏🙏🙏 😊
Thank you too
Thank you🌹💓
Welcome 😊
Excellent .
🙏❤️
عالی
خواهش میکنم 💗🌹
Good 💖🔥
Thanks 🔥
سلام خدمت شما من تمام مراحل را که شما قدم به قدم گفتین رو انجام دادم ولی صدای دوبله واضح شنیده نمیشه حتی گزینه max audio acceleration را روی عدد 1 قرار دادم ولی باز درست نشد صدای دوبله واضح شنیده نشد
اگه تیک گزینه acceleration rate regulation و تیک گزینه overlab reduction را فعال کنم به همراه اینکه گزینه max audio acceleration را روی عدد 1 قرار بدم احتمال داره که صدای دوبله فیلم واضح تر شنیده بشه چون صداها با هم تداخل داره شما خودتون یکبار تست گرفتین یا نه
❤❤❤❤
😊💗💖💟❤🌹
با درود و وقت بخیر
بسیار کاربردی بود
یک سوال مهم
آیا همین رو میتونیم روی کامپیوتر خودمون پیاده کنیم یعنی به صورت آفلاین ؟
همچنین آیا محدودیت در استفاده داره از یک اکانت ایمیل
؟
سلام خواهش . نسخه افلاینش فقط برای لینوکس موجوده .
و در مورد ایمیل ، هر ایمیل در هر روز یه چیزی حدود 3 ساعت مجازه که از گوگل کولب استفاده کنه چون نسخه رایگانه که داریم استفاده میکنیم
خب مشکلی در مورد لینوکس ندارم لطفا اگر میتونید نحوه پیاده سازی روی لینوکس رو هم بفرمایید حتی شده باشه هزینه میدم بابتش که بتونم روی لینوکس پیاده کنم
شبکه عصبی مدل شبکه عصبی ... که استفاده میکنه همه رو بتونم روی سیستم خود آفلاین قرار بدم ممنون میشم
سلام من خودم روی سیستمم ویندوز 10 دارم متاسفانه لینوکس ندارم 🙏❤ و سیستمم هم خیلی خفن نیست یه سیستم معمولیه
سلام برای دوبله با صدای بیش از یک نفر با این ارور مواجه میشم NoneType' object has no attribute 'eval
بای چکار کنم؟
سلام . بخش تنظیمات اسپیکر رو روی چند گذاشتی؟
@@AIgolden سلام مرسی زود پاسخ دادید
روی 2
جناب من ی فیلم 25دقیقه ای رو میخوام ترجمه کنم هرکاری میکنم نمیشه همه مراحلشو میرم اما قسمت ترجمه چند ثانیه میره جلو اما هی ارور میده
سلام چه خطایی میده؟
سلام خدمت شما من از فیلتر شکن سایفون استفاده کردم برای دوبله کردن ویدیو در ابتدا یک ویدیوی 105 دقیقه ای فیلم سینمایی به زبان انگلیسی را از حافظه کامپیوتر آپلود کردم و وقتی که آپلودش کامل نشده بود سراغ تنظیمات دیگر ویدیو رفتم و مثل شما تنظیمات رو گام به گام انجام دادم و وقتی که حجم ویدیوی من رنگش سبز شد در آخر گزینهtranslate رو زدم وقتی که میخواست ویدیو رو پردازش بکنه و دوبله کنه ویدیوی من با خطا مواجه شد در میانه راه و دوبله نکرد دلیلش چیه لطفا راهنمایی کنین آیا جایی رو اشتباه انجام دادم
سلام واس آپلود از حافظه دستگاه چون ویدیو طولانیه و مقداری طول میکشه ممکنه به محدودیت استفاده روزانه گوگل کولب برسی . اگه اون فیلم تو یوتیوب موجود هست از طریق لینک یوتوب انجامش بده . یا اینکه یه راه دیگه داره قبل از اجرای پروژه ویدیوت رو تو وبسایت هاگین فیس اپلود کنی و از اونجا لینک مستقیم که براش ایجاد شده کپی کنی . اگه هم با هاگین فیس کار نکردی ، ویدیوشو اپلود میکنم چون چند نفر دیگم همینو گفتن که تو اپلود از حافظه به مشکل میخورن
سلام . یه مشکلی داشتم . اون تیک دقیقه ی شیش رو هم نزدم . انا بعد از یه چنددقیقه ای که کار میکنه بهم ارور connection errored میده
سلام گاهی وقتا پیش میاد که دیسکانکت بشه . ولی اگه جیمیل اضافی داری تو گوگل کولب جیمیل رو عوض کن . یا اینکه عوضش نکن فقط یساعت دیگه با همون امتحان کن .
دااف
هر بار برای دوبله کردن ویدیو باید توکن رو تو گوگل کولب کپی کرد و ران کرد یا گزینه ی save کردنی برای عملیات وجود داره؟
اگه بعد از دوبله ی اول اتصالت با گوگل کولب قطع نشده باشه لازم نیست که متوقف کنی یا توکن بهش بدی
ولی اگه منظورت یک روز بعد هست اون دیگه نه باید از اول اجرا بشه
@@AIgolden ۲ دقیقه بیشتر دوام نداره و با این ایرور مواجه میشه : Connection errored out.
و بعد همه چیز از اول
سلام، من هرچی جیمیل و پسورد وارد میکنم واسم لینک نمیاد تو جیمیل لطفا راهنمایی کنید
پسوردت رو ترکیبب از حروف بزرگ و کوچیک و اعداد و همچنین علامت ها بذار . اگه بازم نشد به ربات پیام بده چک میکنم aigolden_qbot
چرا ارور میده Warning
Make sure to select a 'TTS Speaker' suitable for the translation language to avoid errors with the TTS.
عالیه ویدئو را از گالری گوشی میشه دوبله کرد
خواهش بله دقیقه 3:53 که گفتم سه حالت داره رو همون اولی اگه بذاری بمونه واس انتخاب از گالریه
Connection errored out.
سلام موقع آپلود این ایرور رو داد
مثل اینکه تایم برنامه تموم شد
چرا این اتفاق افتاد؟
سلام اگه حجم ویدیو بالاس میتونی اول تو گوگل درایو اپلودش کنی و لینکشو وارد کنی تو این پروژه که نیازی به آپلود مستقیم نباشه .
@@AIgolden ویدیو از یوتیوب هست
سلام خیلی عالی بود
یه سوال نمیشه رو سیستم خودمون اجرا کنیم سیستم قوی دارم مثلا نمیخوام رو کلود اینا باشه اگر میشه ویدیو مربوط به اون هم بسازید ممنون میشم
خواهش . اگه همچین چیزی دیدم که رو سیستمم جواب بده حتما
سلام چجوری تو این سایت ثبت نام کنیم میشه ویدیو کاملش رو بفرستی
سلام اگه منظورت سایت هاگین فیس هست این ویدیو رو از دقیقه 1:00 تا 2:43 ببین th-cam.com/video/eJ9gHOeYFMs/w-d-xo.htmlsi=gjlDqX4wGkNhzs2T
سلام خواهش میکنم یه راهنمایی کنید که چه جوری میشه یه ویدیو رو زیرنویس کرد
سلام برای ویدیویی که تو یوتیوب آپلود شده منظورته یا هنوز تو حافظه دستگاهه و آپلود نشده؟ کدومش مد نظرته
این متن مباد
مطمئن شوید که هرگز توکن های خود را به صورت عمومی پست نمی کنید!
شما یک ویدیو بزار که از گالریت بشه
همون دقیقه 3:50 اگه نوع آپلود رو تغییر ندی خودش پیشفرض روی گالری هست یعنی لازم نیست مث من به یو آر ال تغییرش بدی . فقط از قسمت آپلود میتونی از بین فایل هات یا گالریت انتخاب کنی
سلام خوبین ببخشید تا یه مدت پیش استفاده میکردم عالی بود جدیدا هر چی میخوام استفاده کنم خطا مبده میشه خودتون هم چک کنید و درضمن اون صفحه هاگین فیس هم چیدمان عوض شده میشه راهنمایی کتید
سلام 🌹 اره بخش گرفتن توکن ، فقط ظاهر سایت تغییر کرده ولی لازم نیست گزینه ها رو تغییر بدی رو همون حاات پیشفرض توکن رو ایجاد کن . منتها پروژه دوبله جدیدا لینک یوتیوپ رو شناسایی نمیکنه و باید طبق این وبدیو که لینکشو میذارم انجام بدی th-cam.com/video/x9Aabk-oLTk/w-d-xo.html
سلام برای دوبله کردن یک سریال که ببش از ۶ کرکتر داره چطوری میشه انجام داد و این که چطور تشخیص میده که شخصی که صحبت میکنه زن یا مرد هست؟
سلام انجام میده فقط گزینه اسپیکر رو 6 بذار . زن و مرد تشخيص میده اما ممکنه دو تا از شخصیتها صدای تکراری و شبیه به هم داشته باشن . اما کسی که بفرض خودش مدل های rvc زیادی ساخته، میشه در بخش rvc مدلهای ساخته شده رو اد کنه حالا نمیدونم چقد با rvc آشنا هستین .
@@AIgolden
اتفاقا سوال بدیم همینه ار وی سی همینه که ۱۳ ثانیه از صدای یک شخص میزاریم تا دوبله با اون صدا انجام بشه درسته؟
مشکلی که الان دارم من برتی یک سریال این کار کردم ولی کلا با یک صدا دوبله کرد و صدای پس زمینه مثلا موسیقی متن همه حذف میشن یا با اون تنضیمات میشه یکم صدای کلی را زیاد کرد راهی نداره که به صورت اتوماتیک تشخیص بده الان شخصیتها صحبت نمیکنن مثلا صدا بلند بشه؟
@@bahadory نه ببین rvc که گفتم تو بخش آخر بود همون که لینک یه مدل صدا که از قبل ساخته شده رو بهش میدادیم و بجای یه لینک میشد بالای 10 تا مدل رو اد کنیم که من تو ویدیو فقط یدونه اد زدم . اگه از rvc استفاده نکنیم خود پروژه نهایتش3 با 4 مدل فارسی بطور پیشفرض داره. rvc یعنی صدای شخصی که با هوش مصنوعی شبیه سازی شده . ویدیوی ساخت مدل رو اگه دیده باشی متوجه منظورم میشی
ببخشید ارور میده که list index aout off range
سلام این خطا رو کدوم بخش دریافت کردی .؟
سلام می تونیم از یک توکن در چند پروژه استفاده کنیم و در زبان فارسی گوینده زن داره یانه
سلام بله مشکلی نداره . گوینده زن هم داره همون که اسمش زده Dilara . اگه درست تایپ کرده باشم
این ارور را میده :
ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts.
pyannote-audio 3.1.1 requires omegaconf=2.1, but you have omegaconf 2.0.6 which is incompatible.
سلام باید بدونم تو کدوم مرحله این خطا رو دریافت کردی یه زحمت بکش با اسکرین رکوردر مراحلی که انجام میدی رو ضبط کن و به این ربات بفرس چک کنم aigolden_qbot
سلام
دمت خیلی گرم
خداحفظت کنه،
به نظرت میشه این کار رو تبدیل به پروژه کرد برای سایت های فریلنسری ایرانی و خارجی؟
لینک کولب و بقیه لینک ها منقضی نمیشه؟
ممنون
نکن باو اینکارو به فنا نده بزا استفاده کنیم
سلام خواهش 💗 لینکش که همیشه هستش و منقضی نمیشه . و بیشترین استفادش به نظرم زبانهای غیر از فارسی باشه چون زبانهای دیگه نسبت به فارسی خیلی خوب واس هوش مصنوعی تعریف شدن . البته خود یوتوب هم طبق گفته خودش میخواد این قابلیت رو در یوتیوب فعال کنه طی همین سال یا سال دیگه .
نه ، به کسی معرفی نمیکنم😂 ، میخوام خودم پول در بیارم😂@@HabilSport
@@HabilSportمنظورم این بود که من توی سایت های فریلنسری میزنم دوبله ویدیو و پول بگیرم ، نه اینکه خود پروژه رو لو بدم.
انجام دادم تا به قسمت ترجمه که میرسید ارور libcublas میده چرا
سلام من لینک دادم از یوتیوب ترجمه که میشه ولی بارگیری نمیشه یکم بارگیری می کنه بعد قطع میشه
پلی کن بعد با یه برنامه ضبط فیلم از صفحه گوشی مشکلت حل میشه😊
منظورتون رو نمی‌فهمم چطوری ؟؟؟میشه بیشتر توضیح بدید ممنون
آموزش تون عالی بود ❤ و من بدون مشکل انجام دادم . یه سوال. چرا باید این روند رو بریم . یعنی در هر قسمت داریم چکار میکنیم و کدوم هوش مصنوعی این کار رو برامون انجام میده ؟
سلام خواهش ❤️ این پروژه با پایتون نوشته شده و این روند بخاطر اینه که ما بجای استفاده از گرافيك و پردازه سیستم خودمون ، از پردازنده های رایگان گوگل استفاده کنیم که با گوشی هم بشه انجام داد . حالا انشاله چند وقت دیگه یه نسخه دیگه معرفی میکنم که اینهمه مراحل نیاز نباشه .
سلام آیا با این روش میتونیم فیلمهای سینمایی از تو گالری مونم به فارسی دوبله کنیم یا نکنه دوبله به فارسی نداره اینم ؟
سلام اونجایی که تو دقیقه 3:52 من تغییرش دادم شما اونو تغییر نده و همونجا رو علامت آپلود بزن . و درضمن بعد اپلود لازم نیست تیک گزینه active voice imitation رو بزنی بذار خاموش بمونه . و در مورد فیلم سینمایی میشه دوبله کرد فقط تعداد اسپیکر رو تغییر بده به تعداد شخصیتهای اصلی در فیلم. اما سه چهار تا مدل فارسی داره که ممکنه بعضی شخصیتهای فیلم صداشون شبیه هم بشه
آها ممنون فقط اینکه ایا صدای شخصیت ها رو که انتخاب کنم واسه تمام قسمت های اون فیلم یا سریال همون صدا اعمال میشه یا واسه قسمت جدیدش باز رو اون کارکتر دوبلور قبلی نیست ؟
و این :
ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts.
fairseq 0.12.2 requires omegaconf
سلام من وارد میشم جای توکن به مشکل میخورم
سلام توکن قبلی رو از وبسایتی که گرفتی حذف کن و یه توکن جدید ایجاد کن
داداش من لینک میدم میزنم رو ترجمه بهم ارور میده
سلام صفحه قبلی گوگل کولب که در حال اجرا هست رو چک کن ببین از کولب دیسکانکت شده یا فقط تو صفحه gradio ارور میده . اگه از gradio ارور میده احتمالا تو انتخاب زبان یه اشتباه شده . حالا اسکرین شاتش هم به این ربات بفرستی چک میکنم : aigolden_qbot
آیا میشه صدای خودم را به جای گوینده برنامه قرار داد ؟
بله از اونحایی که تنظیمات create TTS based هست ، یه نمونه صدا اپلود کن
این ارور هم میده Error
CUDA failed with error out of memory
سلام به این ربات شات بده چک کنم که تو کدوم مرحله این خطا اومده
aigolden_qbot
@@AIgolden تمام گزینه هایی که گفتین رو زدم طبق ویدیو وقتی روی دکمه ترجمه میزنم این ارور میاد و قبلش اون اخطار هم میاد که توی یک کامنت دیگه براتون فرستادم
@@AIgolden متاسفانه ربات کار نمیکنه اگه میشه آیدی خودتو بده
ویدیو های بیشتر از ۱۵ دقه ره چگونه دوبله کنیم؟
سلام محدودیت زمانی نداره فقط دیشب رابط gradio به مشکل خورده بود . ولی یه مشکل موقته و برطرف میشه شایدم شده .
خسته نباشید
در دقیقه 10:44 لینک مدل رو آوردین که مربوط به هاگینگ فیس هست ولی در آموزشتون تو همون ویدیو که چاوشی و شادمهر رو تغیر دادین فقط لینک گوگل درایو رو یاد دادین
میشه بگین چطور مدل رو داخل سایت هاگینگ فیس آپلود کنیم و لینکشو از کجا بدست بیاریم؟؟؟؟
سلام خواهش تو این ویدیو گفتم نحوه اپلود رو از دقیقه حدودا 1
th-cam.com/video/yxp1zAWgbR0/w-d-xo.html
@@AIgolden ممنونم🌹🌹🌹
سلام این هوش مصنوعی رایگانه؟
سلام اره رایگانه
از مه هیچ دوبله نه شد داداش
از خطایی که میگیری شات بفرس به این ربات تل aigolden_qbot
سلام لطفا یک اپلیکیشن معرفی کن که فیلم رو قشنگ با صدای خود فرد دوبله کنه توی این ویدیو صدا خیلی عقب هستش
باید یک جوری دوبله کنه که با صدای فرد همخوانی داشته باشه
ممنون میشم راهنماییم کنی
و اینکه من الان زبان فیلم رو نمی دونم چطور باید تشخیص بدم که زبان فیلم یا کلیپ چیه؟؟؟
و لطفا یک برنامه هم بگو برای زیر نویس با هوش مصنوعی
متشکر
سلام اپلیکیشنی که رایگان دوبله انجام بده وجود نداره تو وب . و علت این ناهماهنگی اینه که طرف به انگلیسی دو کلمه میگه و به فارسی ترجمش میشه یه جمله طولانی تر . و اگه زبان فیلم رو نمیدونی گزینه زبان مبدا رو دست نزن بذار رو خودکار بمونه . و در مورد زیر نویس منظورت استخراج زیر نویسه ؟ یا زیرنویس کردن فیلم ؟
نه منظورم ترجمه درست زیر نویس هستش با گوگل ترنسلیت ترجمه بشه بیشتر کلمات اشتباه از اب در میان و من میخوام زیر نویس فیلم رو با هوش مصنوعی ترجمه کنم ایا با این سایت میشه ؟
@@AIgolden
همش ارور میداد
کدوم بخش؟
@@AIgolden قسمت اپلود ویدیو
سلام موقعی که ویدئو سه نفره بهش میدم ارورو لایسنس میده و ویدئو تک نفررو هم تا آخرش دوبله نمیکنه فقط یکم اولشو دوبله کرد میشه لطفا راهنمایی کنین
سلام بخش اسپیکر که من رو 1 گذاشتم رو 3 بذار و اینکه اونجایی که دقیقه ششم ویدیو یه گزینه رو تیک زدم اون اشتباه شد و نباید تیک بخوره
احتمالا به خاطر همون تیک Active Voice Imitation باشه که باید برداشته بشه
@@AIgolden سلام اینکارارو میکنم ولی باز هم ارور Accept the license agreement for using Pyannote 2.1. You need to have an account on Hugging Face
رو میده و هم اگه اسپیکر رو روی یک بزارم این ارورو نمیده ولی خیلی از قسمتای ویدئو رو دوبله هم نمیکنه
@@user-fn3uu6zy1x ببخشید شما تیک گزینه active voice imitation رو فعال کردین؟ یا خاموشه
سلام ، استاد آموزش کپی کردن و شخصی کردن پروژه کولب کدومه؟
سلام بالای صفحه گزینه Save to drive رو بزن . و با هر رنگی دوس داری شخصیش کن .
قربون دستت❤@@AIgolden
سلام نه من اصلا توکن نساختم اما این نوشته میاد
مطمئن شوید که هرگز توکن های خود را به صورت عمومی پست نمی کنید!
وهر چی میزنم روی توکن جدید نمیاره ممنون میشم راهنماییم کنید ❤
بیا تلگرام به این رباته اسکرین شاتش رو بفرس من چک میکنم : aigolden_qbot
@@AIgolden فرستادم ممنون ازتون خیلی بدردم میخوره چون بافنده هستم ممنون اگه بتونم عالی میشه 🤎🤎