몇가지 잘못된 정보가 있네요. FLUX.1 [Schnell] 은 FLUX.1 [Dev] 보다 작은 모델이 아닙니다. 둘다 크기는 동일합니다. 대신 양자화라고 해서 fp8 혹은 nf4 로 사이즈를 줄인 모델이 별도로 있습니다. (양자화해서 별도로 저장하고 쓰기도 하지만 원본 모델을 로드할 때 실시간으로 양자화 시킬 수도 있습니다.) 영상에서는 Load Diffusion Model 노드의 설정에 fp8_e4m3fn 이라는 것이 선택되어 있는데, 이게 원본인 fp16 모델을 fp8로 양자화 해서 로드하는 것입니다. 이 경우 용량이 반 정도로 줄어들게 되며, 약간의 품질 저하가 생깁니다. 양자화에 대해서 약간의 부연 설명을 하자면 LLM 등에서도 널리 사용되는 기법으로 모델 크기가 워낙 크니까 16비트로 표현되는 가중치 값을 8비트 혹은 심하게는 2비트까지도 정밀도를 줄이는 기법입니다. 당연히 품질저하가 발생하기는 하는데 그럼에도 불구해서 쓸만하기 때문에 널리 사용되고 있습니다. Pro와 비교했을 때 Schnell 과 Dev 모두 증류(Distillation)된 모델인데, Dev는 가이던스만 증류된 모델이고, Shcnell은 가이던스와 스텝 2가지가 증류된 모델입니다. Schnell이 스텝이 증류되었다는 의미는 약간의 품질 저하가 있는 대신 4~8스텝의 짧은 스텝으로 이미지를 생성할 수 있습니다. 기존 SD 에서 터보 혹은 라이트닝 모델들이 여기에 해당합니다. FLUX.1 [Dev] 의 라이선스에서 비상업적 사용 제한은 통상적인 이미지 생성에는 적용되지 않습니다. 비상업적 이용 제한 해당하는 부분은 파인튜닝등을 통한 모델의 판매 혹은 Dev 모델을 통해서 산출한 이미지를 상업 모델의 학습에 사용하는 것을 제한하는 것입니다.
추가설명 감사합니다. 당연히 SD3 처럼 다양한 사이즈로 릴리즈되어, 사이즈로부터 오는 성능의 차이라고 생각했었네요. 이 댓글을 보신 분들 중에 양자화에 대해 더 궁금하신분이 있으시면, 저희 EndPlan 블로그에 양자화 관련되어 정리한 글을 보시면 도움이 될 것 같습니다. endplan.ai/%ec%96%91%ec%9e%90%ed%99%94-quantization-1-58bit/ 언급하신 2비트와 비슷하게 마이크로소프트에서 제안한 1.58비트 LLM에 대한 설명이 포함되어 있습니다.
여러분 작업하실 때 어떤 마우스 사용하시나요? 저희 둘은 로지텍에서 나온 기능성 마우스를 사용하고 있습니다. Engui님이 사용하는 마우스 : link.coupang.com/a/bNvpJc macho님이 사용하는 마우스 : link.coupang.com/a/bNvpxO "이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다."
엇 표정편집기 제가 만든거네요 ㅋㅋ
와 정말 파워집돌이님이 맞으십니까???
너무 신기하네요!!!
대화 후 어떻게 사람 표정 멈추게 하는건지 여쭈어도 될까요?
@@ENDPLAN 넵 접니다 ㅎ
@@user-lb4dn0pa6d 컴피 매니저로 설치가능합니다
@@About-Love-Song 표정이 멈춘다는게 어떤의미인지 잘 모르겠네요 스샷이나 설명을 깃허브 이슈란에 올려주시면 확인해보겠습니다
캐릭터 대화하는 영상은 입모양이 싱크가 잘맞는데 뭘로 만드시는건가요?
안녕하세요! LivePortrait라는 기술을 이용해서 생성합니다 ㅎㅎ
관련된 리뷰는 저희 다른채널인 Endplan : AI 라이프 채널에 올린 영상 참고해주세요
th-cam.com/video/MhXBcKAmhrw/w-d-xo.html
@@ENDPLAN 감사합니다. 영상 잘보겠습니다.
건너편에 계신 분 키보드 뭐 쓰시나요?? 조용한데도 뽀각뽀각 소리가 너무 좋네요
Aula f87 pro (독거미 키보드) 그레이축 사용하고 있습니다.
link.coupang.com/a/bNNbXr
"이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다."
새로운 시청자 입니다. 잘보고 있습니다!! 갇힌 생태계보다 열린 생태계로 여러 플랫폼을 쓰고 싶습니다.
반갑습니다 ㅎㅎ 자주 뵙겠습니다~!
영상에 사용되는 Pc사양이 궁금합니다.
i5-13600k, RTX 4070ti 12GB 사용중입니다!
@JoeMultimedia 28:07 This method of creating short videos with facial expressions is very interesting and worth trying out.
이런 대화 형식 좋네요
와 잘 듣고갑니다.
틀어놓고 작업하기 좋네요. 많이 많이 컨텐츠 뽑아 주세요
감사합니다~ ㅎㅎ 업로드 많이많이 하겠습니다!
오! Flux / Live Portrait 모델 워크플로우를 GUI로 시각화하고 제어하는 것은 어떻게 하신건가요~?
ComfyUI이군요
저런 기능이 게임/영화 에니메이팅에 접목된다면 진짜 격변이겠네요
대 유쾌 마운틴이 곧 이겠네요 진짜 와
영상 잘 봤어요. Suno로 음악을 만들고 있습니다. Stem 기능이 생겼는데 Udio와는 생성하는 방식이 다른 것 같아요.
수노 이용자라니 너무 반갑습니다. 수노는 보컬을 분리해서 두 트랙으로 만드는거 같아요.
@@ENDPLAN 맞아요. 뜯는 느낌이랄까... 처음부터 트랙을 나누어 생성하지는 않는 것 같습니다.
그게 아쉬워서 우디오 테스트 중인데요. 수노가 더 일반인 친화적인 것 같아요.
@@ENDPLAN 예. 저는 아직 Suno가 편합니다. Udio는 가사와 프롬프트를 바꿔도 원하는 음악 스타일이 잘 나오지 않더라구요. 학습 소스가 달라서 그렇겠지요.
라이브포트레이트는 진짜 언리얼에 접목만 된다면 진짜 신세계 열리는데
접목하는 법을 아직 몰라서 애 많이 먹고 있네요 ㅎㅎ
언리얼에서 렌더한 영상에 적용해볼 수 있을 것 같네요!
@@ENDPLAN 언리얼이나 블렌더등 각종 CG툴에서도 2D와 3D의 경계를 무너뜨리고 생성 AI의 기능을 도입하는 여러 시도들이 모두 융합의 길로 가고 있는 시점인것 같습니다.
몇가지 잘못된 정보가 있네요.
FLUX.1 [Schnell] 은 FLUX.1 [Dev] 보다 작은 모델이 아닙니다. 둘다 크기는 동일합니다.
대신 양자화라고 해서 fp8 혹은 nf4 로 사이즈를 줄인 모델이 별도로 있습니다. (양자화해서 별도로 저장하고 쓰기도 하지만 원본 모델을 로드할 때 실시간으로 양자화 시킬 수도 있습니다.)
영상에서는 Load Diffusion Model 노드의 설정에 fp8_e4m3fn 이라는 것이 선택되어 있는데, 이게 원본인 fp16 모델을 fp8로 양자화 해서 로드하는 것입니다.
이 경우 용량이 반 정도로 줄어들게 되며, 약간의 품질 저하가 생깁니다.
양자화에 대해서 약간의 부연 설명을 하자면 LLM 등에서도 널리 사용되는 기법으로 모델 크기가 워낙 크니까 16비트로 표현되는 가중치 값을 8비트 혹은 심하게는 2비트까지도 정밀도를 줄이는 기법입니다.
당연히 품질저하가 발생하기는 하는데 그럼에도 불구해서 쓸만하기 때문에 널리 사용되고 있습니다.
Pro와 비교했을 때 Schnell 과 Dev 모두 증류(Distillation)된 모델인데, Dev는 가이던스만 증류된 모델이고, Shcnell은 가이던스와 스텝 2가지가 증류된 모델입니다.
Schnell이 스텝이 증류되었다는 의미는 약간의 품질 저하가 있는 대신 4~8스텝의 짧은 스텝으로 이미지를 생성할 수 있습니다.
기존 SD 에서 터보 혹은 라이트닝 모델들이 여기에 해당합니다.
FLUX.1 [Dev] 의 라이선스에서 비상업적 사용 제한은 통상적인 이미지 생성에는 적용되지 않습니다.
비상업적 이용 제한 해당하는 부분은 파인튜닝등을 통한 모델의 판매 혹은 Dev 모델을 통해서 산출한 이미지를 상업 모델의 학습에 사용하는 것을 제한하는 것입니다.
추가설명 감사합니다. 당연히 SD3 처럼 다양한 사이즈로 릴리즈되어, 사이즈로부터 오는 성능의 차이라고 생각했었네요.
이 댓글을 보신 분들 중에 양자화에 대해 더 궁금하신분이 있으시면, 저희 EndPlan 블로그에 양자화 관련되어 정리한 글을 보시면 도움이 될 것 같습니다.
endplan.ai/%ec%96%91%ec%9e%90%ed%99%94-quantization-1-58bit/
언급하신 2비트와 비슷하게 마이크로소프트에서 제안한 1.58비트 LLM에 대한 설명이 포함되어 있습니다.
언덕을 넘어선다 ㅋ
여러분 작업하실 때 어떤 마우스 사용하시나요?
저희 둘은 로지텍에서 나온 기능성 마우스를 사용하고 있습니다.
Engui님이 사용하는 마우스 : link.coupang.com/a/bNvpJc
macho님이 사용하는 마우스 : link.coupang.com/a/bNvpxO
"이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다."