살아 움직이는 초상화를 만들어 주는 Live Portrait - 스테이블 디퓨전 ComfyUI
ฝัง
- เผยแพร่เมื่อ 12 ก.ย. 2024
- 초상화 이미지에 원하는 얼굴 표정과 동작을 넣어서 영상을 제작 할 수 있습니다.
본인이 직접 카메라에 녹화한 얼굴 표정을 다른 이미지에 그대로 적용해서 에니메이션을 만들 수 있습니다.
살아 움직이는 초상화를 만들수 있습니다. 활용도가 많은 도구 입니다.
커피 사주세요 www.buymeacoff...
LivePortrait 공식 github 사이트 ###
github.com/Kwa...
LivePortrait homepage ###
liveportrait.g...
LivePortrait ComfyUI 노드 github 사이트 ###
github.com/kij...
LivePortrait 모델 파일 다운로드 사이트 ###
huggingface.co...
insightface 문제 해결 부분 영상 (이전 ReActor영상 일부분) ###
• ComfyUI에서, 얼굴 바꾸고 동일인물...
ComfyUI를 시작합니다 시리즈 • ComfyUI를 시작합니다.
이미지 업스케일링 끝판왕 - SUPIR (스테이블 디퓨전) • 이미지 업스케일링 끝판왕 - SUPIR ...
스테이블 디퓨전 (ComfyUI) IC-Light - 빛을 사용하면 이런 것도 가능합니다!!! • 스테이블 디퓨전 (ComfyUI) IC-...
#stablediffusion #스테이블디퓨전 #ComfyUI #Comfy #LivePortrait #Live #Portrait #animation #컴피 #expression #face #facial
![[[OFFICIAL MV]] เอิ้นขวัญให้อ้าย- อ๊ะอาย สกุณาพร | ค่ายเพลงเป็นหนึ่ง](http://i.ytimg.com/vi/83x6L3X3qh0/mqdefault.jpg)
V2로 업데이트 되면서 노드와 사용방법이 바뀌었습니다. 업데이트 영상을 곧 올릴 예정 입니다. 예제 workflow를 사용하시면 업데이트 노드들을 보실 수 있습니다.
어떻게 이렇게 딱 필요한 타이밍에 이렇게 귀한 영상을 제공해주시죠 ... 감사합니다! 앞으로도 계속해서 질좋은 영상 만들어주시면 감사하겠습니다.
와.. 😂😂 대박이에요
좋은 강의 잘 보았습니다.
지금은 얼굴만 지원되는데 곧 전신의 동작도 지원되겠네요
세상 참 놀랍게 변해갑니다...
역쉬! 꼼꼼 디테일!! 최곱니다
ㅋㅋㅋ 놀라서 경끼.. 빵 터졌습니다. ㅋㅋ 감사합니다. 좋은 정보:)
ㅋㅋ.. 정말 그러지 않을까... 걱정이 되어서 ...
2D든 3D 캐릭터든 만들고 나서 표정 애니메이션을 만드는게 상당한 난제였는데....너무 쉽게 해결되어 버리는군요~! 알지 못했던 문제점이 추후에 생길 가능성은 없을까요? PS : face motion capture 장비 회사 다 망하겠네요! @@
이거 언리얼 엔진에도 적용만 된다면 진짜 페이스 모캡 회사들 다 망할듯요. ㅋㅋㅋㅋ
아 아이폰 없는 찐따 만들던 시기는 이제 그만... ㅠㅠ
앞으로 몇달, 몇년 후에 점점더 더 놀라운 뭔가가 나오지 않을까요? 많이 바뀌겠죠?
오,.......................놀랍군요..
좋은 정보 감사합니다. ^^;
와 이거 미쳤네요..
얼굴이 움직이면 일그러짐,, 거의 고정이어야 함
어이구 복잡해... 나중에 다시 봐야 겠네요. 머리에 쥐난 ... 아 댓글보니 사용법이 바뀌었군요,, 그럼 나중에 ~
ComfyUI 를 시작합니다. 영상은 처음 시작하는 단계부터 설명 합니다. 도움이 될겁니다.
th-cam.com/video/NqmWqd-op1c/w-d-xo.html&pp=gAQBiAQB
아 ㅎㅎㅎ 클로님 목소리 앞전영상부터 보다보니 그 케릭터 목소리인줄....ㅋㅋㅋ
앗, 가장 처음 AI 목소리로 시작해서 지금은 직접 녹음합니다. 아직도 그 목소리가 그립긴 합니다.ㅎㅎ
인장님 멋진 영상 감사합니다. 질문 하나 드리고 싶은데요. Live Portrait로 변환한 OUTPUT 영상길이가 4초로 제한 된 것 같은데요. 혹시 러닝타임을 길게하려면 어떻게 하면 될까요?
4초 제한이 있는지는 모르겠네요. 제가 해 봤을때는 30초 정도도 되던데요? 근데, 그 이상이면 작동을 멈춰버리더라구요.
저도 4초만 생성되던데 혹시 해결하셨나요?
해결법 frame load cap
항상 잘보고있습니다
matrix로 comfyui 실행해보고 다따라해봤는데, When loading the graph, the following node types were not found:
DownloadAndLoadLivePortraitModels
LivePortraitProcess
Nodes that have failed to load will show as red on the graph.라고 나옵니다.
같은 버그에 대해 누가 제작자에게 물어봤는데 , kiiai가 말하기를
Away for a week actually. This error is just from using workflow that uses the development branch while you are using the main. It will be merged to main when I have the time.
라고 말했습니다. 이게 혹시 무슨뜻인지 아실까요?
아 참고로 저는 stablediffusion으로 reactor도 사용이 되서 insightface는 문제없는것같습니다. 그리고 portable말고 일반모드입니다
대충 main을 사용해서 안된다는거같은데 이게 git 설치할때 master말고 main으로 깔아서 안된다고 하는걸까요? 이쪽으로는 문외한이라 여쭤봅니다
댓글이 늦었네요. 제가 잠시 다른거에 바빠서...
님이 올리산 설명에도 개발자가 잠시 딴거 하느라 바빴다네요... 요즘 다들 바쁘구나~...ㅎㅎ
암튼, 이거 githug에 있는 개발중인 브랜치가 사용되고 있어서 생기는 에러이고, 자기가 시간되면 다시 합쳐서 해결 하겠다고 합니다. 아마 지금쯤은 해결 되었을수도 있습니다.
참고로, Live Portrait이 지난주에 급하게 업데이트가 되었고, 노드도 많이 바뀌었습니다. 조만간 업데이트 관련 영상을 만들까 합니다.
좋은 영상 감사합니다. 저도 따라서 한번 해봤는데 실사 이미지를 해봤거든요. 근데 표정은 따라하긴 하는데 뭔가 꿀렁꿀렁 사람이 움직이는데 왜 그런걸까요? 영상이랑 이미지 비율은 1:1로 동일하게 맞췄습니다.
자답합니다 ㅎㅎ driving 영상을 1:1 비율로 얼굴이 화면에 가득차게 하니까 떨림이 거의 사라졌네요.
댓글이 늦었네요... 오랜만에 들어와서 답글 답니다.
설명 감사합니다. 참고로, 지난주에 업뎃이 되어서 많이 바뀌었습니다.
Example에서 노드 없어서 빨간색 뜨는분들!!!! 아마 현재는 example 파일이 변경되어서 여러개 노드가 추가된것같습니다(깃헙보면 example파일도 3개임). 그래서 영상방식대로 진행하면 빨간색이 한가득차는데, 해결방법은 Manager에서 Cumstom node manager -> KJ Nodes for Comfyui 설치하시면 해결됩니다!
추가적으로 ComfyUI-VideoHelperSuite 노드와 ComfyUI Essentials도 설치해야하네요. 그냥 노드 설치안된것들 구글링하면 어떤거 설치해야하는지 뜨니까 구글링 ㄱㄱ....
네, 지난주 쯤엔가, 그 개발자가 부랴부랴 업데이트 해서, 지금은 많이 바뀌었습니다. 곧 업데 영상 올릴까 합니다.
늘 양질의 강의 정말 감사합니다. 혹시 이런 에러 문구 나오면 어떻게 해야하나요? 링크에 올려주신 파일들은 다 설치했는데, 이렇게 뜨네요
TypeError: Cannot read properties of undefined (reading 'clientId')
필요한 모델 파일과, insight는 다 잘 되어 있는거죠? github.com/kijai/ComfyUI-LivePortraitKJ/issues/39 여기에 누가 동일한 질문을 개발자에게 한거 보면, 님 외에 다른 사용자도 동일한 문제가 있는듯 합니다. 근데, 저도 이유를 잘 모르겠네요...ㅠㅠ
@@DigiClauLab 답변 감사합니다 ㅎㅎ 결국 깔-끔하게 지우고 다시 깔기로 했습니다 😂
안녕하세요. 디지클로님. 저는 기업내 인재개발그룹에서 AI관련 영상을 사내에 방송을 하고 있는데, 디지클로님의 이 영상을 소개하면 좋을 것 같아 문의를 드립니다. 해당 영상은 아무 편집없이 만드신 컨텐츠 그대로 보여드릴 예정이며, 추후 영상 다시 보기를 희망하는 임직원분들께는 해당 컨텐츠를 바로가기 링크를 걸어 유튜브에 찾아가서 시청하도록 할 예정입니다. 사용해도 될지요?
네, 사용하셔도 됩니다. 영상을 그대로 보여주는 거라면 좋습니다. 혹시 다른 영상도 사용을 원하시면, 제 채널의 소스를 언급하시는 조건으로, 얼마든지 보여주셔도 됩니다.
@@DigiClauLab 네네 알겠습니다. 출처 안내드리고, 다른 영상도 좋은 영상이 많은데 소개하도록 하겠습니다. 좋은 영상 만들어부셔서 감사드립니다!!
insightface 설치 오류가 뜨는데 혹시 맥에서는 이것 설치는 어떻게 해결가능할까요?ㅠㅠ
저는 맥 사용자가 아니라서 잘은 모르지만, github.com/kijai/ComfyUI-LivePortraitKJ/issues/33 이곳에 맥에서 설치 해서 사용 했다는 글이 있습니다.
열심히 따라하고 있습니다. 애플 실리콘으로는 작동 안하진 않겠죠?
물론이죠. github.com/comfyanonymous/ComfyUI?tab=readme-ov-file#apple-mac-silicon
결과물이 8초정도로만 저장이되는데 원본 비디오만큼 늘릴 수 없을까요?
다음 영상에 추가 설명이 들어 있습니다. th-cam.com/video/IJjWaR_O3Wg/w-d-xo.html 님의 질문의 답도 설명되어 있습니다.
안녕하세요 선생님 매니저 다운로드 받고 liveportrait kijai 만든거 다운로드 받고 재실행하면 comfy ui가 실행이 안됩니다 ㅠㅠ 계속하려면 아무 키나 누르십시오 ... 하고 아무키 누르면 자동으로 종료됩니다 왜이럴까요
커맨드 창에 특정한 에러 메세지가 나올겁니다. 그걸 보고 해결하셔야 합니다.
음.. 앞으로는 comfy인가요..
Comfy가 정말 많은 것을 가능하게 합니다.
cmd 애서 python_embeded/python.exe -m pip install insightface를 입력하고 누르면 python_embeded는 내부 또는 외부명령, 실행할 수 없는 ...이라고 뜹니다..왜 그런건가요?
python_embeded/ 이부분을 지우고 하셔요~
@@OutSnake 감사합니다. ㅇ
연기자들 이제 다들 일용직으로 간다가
이거 업데이트 후속 영상 제작중인데, 님 댓글 보고 나서... 저도 연기에 도전합니다.ㅋㅋ 곧 영상 올라 옵니다. 저의 연기력을 보실수 있으실 겁니다.
음...제건 노드가 엄청 많이 나와서 ㅠㅠㅠ 이미지콘테트네이트란 노드가 없던데 ㅠㅠ
무슨 말씀이신가요? 제가 잘 이해를 못했습니다.ㅠㅠ
live process...와 model 이 두개가 벌건색으로... 쿨럭... install missing에서도 안나오고... 휴... ㅠㅠ
Live Portrait 노드 설치하고, ComfyUI를 다시 시작하셨나요? 그렇게 하면 나와야 하는데요..ㅠㅠ
@@DigiClauLab나랑 똑같네요 ㅠㅠ 아무리해봐도 안되네요 ㅠㅠ 해결 하셨나요??
저도 동일한 문제네요. Downloadandloadliveportraitmodels라고 하는거 봐서는 모델이 인식이 안되나 본데, 이야기 하신대로 Models/Liveportrait이라는 폴더 만들어서 6개 파일 넣었는데 인식이 안되나봐요
LivePortraitProcess 라는것도 오류로 나오구요
혹시 연락드릴 수 있는 메일주소나 디스코드 채널이 있을까요?
여러 강의나 자문등 물어보시는 분들이 계십니다. 이 체널도 가외로 하는거고, 제가 메인으로 하는 일이 있어서 다른 일을 할 수가 없습니다. 죄송합니다.
comfyUI 를 설치하고 실행했는데... 저는 MANAGER 창이 안나와서 진행을 못하고있습니다 ㅜㅜ 도와주세요,..,
ComfyUI를 시작합니다. 영상 시리즈가 있습니다. 그 영상아래 댓글에 보면 manager설치 하는 내용만 따로 적어 두었습니다. 그것만 봐도 manager설치 하실 수 있을겁니다.
th-cam.com/video/NqmWqd-op1c/w-d-xo.html
혹시 Forge에서도 사용이 가능한가요?
아뇨, ComfyUI 에서만 가능 합니다. ComfyUI에서 사용할 수 있는 custom node로 나온거라서요.
@@DigiClauLab 아 그렇군요...ComfyUI는 너무 햇갈려서 아직 할 엄두를 못냈는데...천천히 배워야겠네요 ㅠㅠ
그래서 다운받법은 안알려주시나요
다운 방법이라면 무슨뜻인지? 필요한 모델 다운로드 하는건 영상에 설명했습니다. 아니면, Live Portrait 다운 방법을 말씀하시는 건가요? Manger에서 설치 하는 것도 설명했습니다.
두번정도 뽑았는데 갑자기 이런식으로 뜨는데 해결 방법을 아실까요,,,?ConnectionResetError: [WinError 10054] 현재 연결은 원격 호스트에 의해 강제로 끊겼습니다
처음 두번은 잘 되다가 갑자기 그런 건가요? 이 에러는 호스트 쪽에서 종료를 끊은건데. 경우의 수가 정말 많아요. 가령 사용중에 어떤 필요한 모델을 다운 받으려다가 생긴 현상이지 않을까 합니다. 다시 시도해 보시기 바랍니다.
안녕하세요 저는 저장이 MP4 로 설정하면 오류가 나고 gif 로 설정하면 괜찮은데 왜 그런걸까요?
오류라면 어떤 오류인지는 모르겠네요. gif가 가능하면 mp4도 문제 없이 되어야 합니다. 뭔가 추가적인게 필요한게 아니라서요. 아마 다른 어딘가에 이유가 있을듯 합니다.