ComfyUI Wan 2.1 모델 사용 가이드

ComfyUI Wan 2.1 모델 사용 가이드

개요

Wan 2.1은 비디오 생성을 위한 모델 패밀리입니다. 이 가이드에서는 ComfyUI에서 Wan 2.1 모델을 설치하고 사용하는 방법에 대해 설명합니다.

 

필수 파일 다운로드

Wan 2.1 모델을 사용하기 위해서는 다음 파일들을 다운로드하고 지정된 디렉토리에 배치해야 합니다.

다운로드 https://comfyanonymous.github.io/ComfyUI_examples/wan/

텍스트 인코더 및 VAE

• 텍스트 인코더: umt5_xxl_fp8_e4m3fn_scaled.safetensors
  • 저장 위치: ComfyUI/models/text_encoders/
• VAE: wan_2.1_vae.safetensors
  • 저장 위치: ComfyUI/models/vae/

비디오 모델

비디오 생성을 위한 확산 모델은 다양한 버전이 있습니다. 품질 순위는 다음과 같습니다 (높은 순):

• fp16 > bf16 > fp8_scaled > fp8_e4m3fn

메모리가 충분하다면 fp16 버전을 권장합니다. 메모리가 제한적인 경우 fp8 버전을 사용할 수 있습니다.

모든 확산 모델 파일의 저장 위치: ComfyUI/models/diffusion_models/

워크플로우

텍스트에서 비디오 생성 (Text to Video)

이 워크플로우는 wan2.1_t2v_1.3B_fp16.safetensors 파일이 필요합니다. 14B 모델과도 호환됩니다.

필요한 파일

• wan2.1_t2v_1.3B_fp16.safetensors
  • 저장 위치: ComfyUI/models/diffusion_models/

사용 방법

1. ComfyUI를 실행합니다.
2. 워크플로우 JSON 파일을 다운로드합니다.
3. ComfyUI에서 '워크플로우 불러오기' 기능을 사용하여 다운로드한 JSON 파일을 로드합니다.
4. 텍스트 프롬프트를 입력하고 생성 버튼을 클릭합니다.

이미지에서 비디오 생성 (Image to Video)

이 워크플로우는 다음 파일들이 필요합니다:

• wan2.1_i2v_480p_14B_fp16.safetensors
  • 저장 위치: ComfyUI/models/diffusion_models/
• clip_vision_h.safetensors
  • 저장 위치: ComfyUI/models/clip_vision/

참고 사항

• 예제에서는 하드웨어 접근성을 고려하여 512x512 해상도에서 33 프레임만 생성합니다.
• 하드웨어 성능이 좋거나 더 긴 처리 시간을 감수할 수 있다면, 모델은 더 많은 프레임을 생성할 수 있습니다.
• 720p 모델은 하드웨어 성능이 충분하다면 매우 좋은 결과를 제공합니다.

사용 방법

1. ComfyUI를 실행합니다.
2. 이미지에서 비디오 워크플로우 JSON 파일을 다운로드합니다.
3. ComfyUI에서 '워크플로우 불러오기' 기능을 사용하여 다운로드한 JSON 파일을 로드합니다.
4. 입력 이미지를 준비합니다. (Flux 페이지에서 예제 이미지를 찾을 수 있습니다)
5. 워크플로우에 이미지를 로드하고 생성 버튼을 클릭합니다.

720p 모델 예제

720p 모델을 사용한 예제도 제공됩니다. 이 모델은 더 높은 해상도의 비디오를 생성하지만, 더 많은 하드웨어 리소스가 필요합니다.

품질 최적화 팁

1. 모델 선택: 가능하면 fp16 버전의 모델을 사용하여 최상의 결과를 얻으세요.
2. 하드웨어 고려: 비디오 생성은 리소스 집약적입니다. 충분한 VRAM을 가진 GPU를 사용하는 것이 좋습니다.
3. 프레임 수 조정: 더 긴 비디오가 필요하면 워크플로우에서 프레임 수를 조정할 수 있습니다.
4. 해상도 조정: 더 높은 해상도가 필요하면 480p에서 720p 모델로 전환하는 것을 고려하세요.
5.  

참고 자료

• ComfyUI GitHub 저장소
• ComfyUI Wan 2.1 예제 페이지
• ComfyUI 공식 문서

---

참고: 이 가이드는 ComfyUI Wan 2.1 모델 사용에 대한 정보를 제공합니다. 모델 파일과 워크플로우는 원본 사이트에서 다운로드하세요.