How to convert movie to anime video using ComfyUI, AnimateDiff, ControlNet and LCM

แชร์
ฝัง
  • เผยแพร่เมื่อ 10 ม.ค. 2025

ความคิดเห็น • 47

  • @FutuTek
    @FutuTek  28 วันที่ผ่านมา +1

    Because many ones asked, I inputed all models and loras links to the description, let's have fun

  • @dmitrykonovalov9366
    @dmitrykonovalov9366 28 วันที่ผ่านมา

    Nicely explained! Many thanks.

  • @larryleng8531
    @larryleng8531 13 วันที่ผ่านมา +1

    偉大的創舉,我一直在嘗試畫面的協調的問題,畫面和動作以及風格,你做到了,我一直想簡化流程單事實證明這沒有捷徑必須一點一點的處理細節,你的控制部分太棒了給了我很多的啓發,應該還能更高,非常感謝你。

  • @quangdinhdota2388
    @quangdinhdota2388 5 วันที่ผ่านมา

    Thank for your video. Can you note detail file for each box in step 2. Same file I don’t know how I should add exactly file fill in box. Name file different in your video ❤

  • @nholmes86
    @nholmes86 22 วันที่ผ่านมา

    Superb conversion

  • @STAR_SOLOS
    @STAR_SOLOS 23 ชั่วโมงที่ผ่านมา

    this workflow doesnt work anymore ! can you do a updated version ! idk why but i get error !

  • @MrCalmwaters112
    @MrCalmwaters112 4 วันที่ผ่านมา

    Can't hear anything. Why would you have the music so loud?

  • @ian2593
    @ian2593 12 วันที่ผ่านมา

    Great workflow! This is the first one that has applied the style without artifacts for me. I'm wondering how many frames it can convert on a mid range machine with an RTX 4070 series.

    • @FutuTek
      @FutuTek  12 วันที่ผ่านมา +1

      You should convert the max 15s video with 12fps, then use Film FVI to improve the interpolation to upgrate to 24fps

  • @KanaNoClown
    @KanaNoClown 18 วันที่ผ่านมา +1

    So good

  • @MisterWealth
    @MisterWealth 17 วันที่ผ่านมา +1

    My footage just comes out discolored/purple for some reason, do you know why?

    • @FutuTek
      @FutuTek  16 วันที่ผ่านมา +1

      Do you mean you use my footage in description? or you own footage? if you use your own footage please try to re-create it with higher frame rate

    • @MisterWealth
      @MisterWealth 15 วันที่ผ่านมา +1

      @@FutuTek My own footage, for some reason if its not slow motion video, itll have a weird purple cast, or it won't detect the faces, or generally have some terrible artifacts

  • @Isi-uT
    @Isi-uT หลายเดือนก่อน +1

    Nice!

  • @ComfyUIstudio
    @ComfyUIstudio หลายเดือนก่อน

    Hi, love your video style. can you add to the workflows model links in a note node?

    • @FutuTek
      @FutuTek  หลายเดือนก่อน

      Hello, it is very easy, you load my workflow to your ComfyUI, then you will see the "modelname.safetensor" or "modelname.ckpt" in every workflow, just type this full "modelname.safetensor" to Google and then you will seed a lot of sources to download it

  • @dmitrykonovalov9366
    @dmitrykonovalov9366 28 วันที่ผ่านมา

    I searched and found most but not all loras/vae/models. It would be nice if you could add the links to the safetensors you are using.

    • @FutuTek
      @FutuTek  28 วันที่ผ่านมา

      I inputed all models and loras links to the description, let's have fun

  • @adukomik720
    @adukomik720 หลายเดือนก่อน

    Super awesome! and thanks for the workflow. However I am missing some nodes and being a newbie on comfyui I don't know the workaround. When you find time please help. Thanks

    • @FutuTek
      @FutuTek  หลายเดือนก่อน +1

      Hello please follow below steps:
      1. Update your ComfyUI to the latest version: Manager / Update All, then restart ComfyUI
      2. Load my workflow in the video discription
      3. Installing missing notes: Manager / Install Missing Custome Nodes, then have fun

    • @adukomik720
      @adukomik720 หลายเดือนก่อน

      @@FutuTek I appreciate you for responding. Yes, I have updated to the recent comfyui, still figuring out how to fix import failed ComfyUI-Advanced-ControlNet and AnimateDiff Evolved. Thanks

    • @adukomik720
      @adukomik720 หลายเดือนก่อน

      @@FutuTek what models did you use. SDXL or v1.5?

    • @FutuTek
      @FutuTek  หลายเดือนก่อน

      @@adukomik720 Try to install them separately in Manager / Custom Nodes Manger

    • @FutuTek
      @FutuTek  หลายเดือนก่อน +1

      I use SD 1.5, the SDXL is not much good for AnimateDiff

  • @sprocketamerica1
    @sprocketamerica1 หลายเดือนก่อน

    Getting:
    Prompt output failed validation: Exception when validating node: name 'full type name' is not defined
    VHS_VideoCombine

    • @FutuTek
      @FutuTek  หลายเดือนก่อน

      You can try by right click to the note and select Fix node(recreate)

    • @sprocketamerica1
      @sprocketamerica1 29 วันที่ผ่านมา

      @@FutuTek no sorry does not fix it.....please review your work flow you posted because i think it is differnt then you video

    • @FutuTek
      @FutuTek  29 วันที่ผ่านมา

      @@sprocketamerica1 I have just added a new workflow to the folder, name "...241213", I already tested it, if the problem still occur pls. check your software and computer setting

    • @sprocketamerica1
      @sprocketamerica1 28 วันที่ผ่านมา

      @@FutuTek what version of comfyUI are you running this may be my issue because i still get he (Prompt outs failed validation) Exception when validating node : name 'full type name' is not defined VHS_VideoCombine

  • @mohammedzaidkhan5687
    @mohammedzaidkhan5687 10 วันที่ผ่านมา

    How much time did it take to convert the video you showed us,
    Please respond, i would appreciate it brother

    • @FutuTek
      @FutuTek  9 วันที่ผ่านมา

      I use a RTX 4090 GPU then it took me 30 min

    • @mohammedzaidkhan5687
      @mohammedzaidkhan5687 9 วันที่ผ่านมา

      @FutuTek thanks a lot brother

  • @ivanbelyakov
    @ivanbelyakov 22 วันที่ผ่านมา

    Thanks for the video! I need help. It issues errors, and then the calculation stops at 9%...
    lora key not loaded: lora_unet_up_blocks_0_attentions_1_transformer_blocks_0_attn1_to_k.lora_down.weight
    ERROR lora diffusion_model.output_blocks.3.0.in_layers.2.weight shape '[1280, 2560, 3, 3]' is invalid for input of size 11059200

    • @ivanbelyakov
      @ivanbelyakov 22 วันที่ผ่านมา

      changed LCM SDXL to LCM 1.5 and the process started. Then it hung at 9%, with 95% GPU load. I waited 5 hours, but nothing happened. The scheme and example files are yours.

    • @FutuTek
      @FutuTek  22 วันที่ผ่านมา

      @@ivanbelyakov There is not enough RAM (not VRAM), you need a computer at least 32G RAM, then please reduce the upscale resolution to 1024x576 then run test for 1 second (24 frame only), then increase it gradualy

    • @ivanbelyakov
      @ivanbelyakov 21 วันที่ผ่านมา

      @@FutuTek I have 64gb RAM

    • @FutuTek
      @FutuTek  21 วันที่ผ่านมา

      @@ivanbelyakov I have 64G too, and sometiem the same problem still occured, just reduce the resolution or shorten the length then the problem will be solved

    • @quangdinhdota2388
      @quangdinhdota2388 16 วันที่ผ่านมา

      Same problem. Have you solved problem?

  • @miratdrati
    @miratdrati 23 วันที่ผ่านมา

    Can I change the video style bro? where to change, I'm new to comfyui

    • @FutuTek
      @FutuTek  23 วันที่ผ่านมา

      What you mean "video style"?

    • @miratdrati
      @miratdrati 23 วันที่ผ่านมา

      @ yes. i want change style video, eg : chibi ?

    • @FutuTek
      @FutuTek  22 วันที่ผ่านมา +1

      @@miratdrati you just go to civitai.com, type chibi to the search, enter, then select model SD 1.5 on the left, there are many chibi model for download, just download to comfyui\models\checkpoints, then refresh the workfow.
      After that you can choose new model in the Group Node 2 (load checkpoint)

  • @jorgediaz9093
    @jorgediaz9093 10 วันที่ผ่านมา +1

    Lower the background music is to loud to annoying

  • @larryleng8531
    @larryleng8531 13 วันที่ผ่านมา

    我們一直嘗試在讓AI既能發揮他的能力又需要規範他的動作,所以我們不得不把更多的控制也就是約束加給他,這讓我很迷惑 到底是我們在創造AI還是AI在探查我們的底綫。這太難了
    另外這個工作流的消耗確實是驚人的,我的頂級設備,在運行的時候遇到了兩次溫度報警。但這依然是給我非常多的啓發,非常感謝你的貢獻我愛你,最誠摯的尊重,來自東方的祝福。

    • @FutuTek
      @FutuTek  13 วันที่ผ่านมา

      You should reduce the video resolution and shorten the video to avoid the high temperature