ComfyUI Wan2.1 Fun Camera 공식 예시

이 가이드는 ComfyUI에서 Wan2.1 Fun Camera를 사용해 동영상 생성하는 방법을 보여줍니다.

​

Wan2.1 Fun Camera 소개

Wan2.1 Fun Camera는 알리바바 팀이 출시한 동영상 생성 프로젝트로, 카메라 모션을 통해 동영상 생성 효과를 제어하는 데 중점을 두고 있습니다.

모델 가중치 다운로드:

• 14B 버전
• 1.3B 버전

코드 저장소: VideoX-Fun

ComfyUI는 현재 Wan2.1 Fun Camera 모델을 기본적으로 지원합니다.

로컬 사용자

ComfyUI가 최신 버전으로 업데이트되었는지 확인하세요.

• ComfyUI 다운로드
• 업데이트 가이드

이 가이드의 워크플로는 워크플로 템플릿에서 확인할 수 있습니다. 템플릿에서 찾을 수 없다면, 귀하의 ComfyUI가 오래된 버전일 수 있습니다.

워크플로를 로드할 때 노드가 누락되는 경우, 가능한 원인:

1. 최신 ComfyUI 버전(최신 테스트 버전(nightly))을 사용하고 있지 않음
2. 일부 노드가 시작 시 가져오기에 실패함

클라우드 사용자

• 클라우드는 ComfyUI 안정판 출시 후 업데이트됩니다.

따라서 이 문서에서 핵심 노드가 누락된 것을 발견했다면, 그 이유는 새로운 핵심 노드가 아직 최신 안정판에 공개되지 않았기 때문일 수 있습니다. 다음 안정판 출시를 기다려 주세요.

​

모델 설치

이 모델들은 한 번만 설치하면 됩니다. 또한, 해당 워크플로우 이미지에 모델 다운로드 정보가 포함되어 있으므로, 원하는 방식으로 모델을 다운로드할 수 있습니다.

다음 모델들은 모두 Wan_2.1_ComfyUI_repackaged에서 찾을 수 있습니다.

디퓨전 모델은 1.3B 또는 14B 중 하나를 선택하세요:

• wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors
• wan2.1_fun_camera_v1.1_14B_bf16.safetensors

이전에 Wan2.1 관련 모델을 사용한 적이 있다면 이미 다음 모델들이 있을 것입니다. 아직 없다면 다운로드해 주세요:

텍스트 인코더는 하나를 선택하세요:

• umt5_xxl_fp16.safetensors
• umt5_xxl_fp8_e4m3fn_scaled.safetensors

VAE

• wan_2.1_vae.safetensors

CLIP 비전

• clip_vision_h.safetensors

파일 저장 위치:

📂 ComfyUI/
├── 📂 models/
│ ├── 📂 diffusion_models/
│ │   ├── wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors # 1.3B 버전
│ │   └── wan2.1_fun_camera_v1.1_14B_bf16.safetensors # 14B 버전
│ ├── 📂 text_encoders/
│ │   └── umt5_xxl_fp8_e4m3fn_scaled.safetensors
│ ├── 📂 vae/
│ │   └── wan_2.1_vae.safetensors
│ └── 📂 clip_vision/
│     └── clip_vision_h.safetensors

​

ComfyUI Wan2.1 Fun Camera 1.3B 워크플로

​

Wan 2.1 Fun Camera 1.3B

Wan 2.1 Fun Camera 1.3B 모델로 시네마틱한 카메라 움직임이 있는 다이내믹한 비디오를 생성하세요.

Comfy Cloud에서 실행

Comfy Cloud에서 열기

워크플로 다운로드

JSON 다운로드 또는 템플릿 라이브러리에서 “Wan 2.1 Fun Camera 1.3B” 검색

아래 비디오를 다운로드하여 ComfyUI로 드래그하면 해당 워크플로가 로드됩니다:

14B 버전을 사용하려면 모델 파일을 14B 버전으로 교체하기만 하면 되지만, VRAM 요구 사항에 유의하세요.

입력 자료

이 파일을 해당 LoadImage 노드에 업로드하세요:

video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

LoadImage 노드 52 · video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

​

3. 워크플로를 단계별로 완성하기

1. 올바른 버전의 모델 파일이 로드되었는지 확인하세요:
   • 1.3B 버전: wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors
   • 14B 버전: wan2.1_fun_camera_v1.1_14B_bf16.safetensors
2. Load CLIP 노드에 umt5_xxl_fp8_e4m3fn_scaled.safetensors가 로드되었는지 확인하세요.
3. Load VAE 노드에 wan_2.1_vae.safetensors가 로드되었는지 확인하세요.
4. Load CLIP Vision 노드에 clip_vision_h.safetensors가 로드되었는지 확인하세요.
5. 시작 프레임을 Load Image 노드에 업로드하세요.
6. 자체 입력 이미지를 사용하는 경우 프롬프트를 수정하세요.
7. WanCameraEmbedding 노드에서 카메라 모션을 설정하세요.
8. Run 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용하여 생성을 실행하세요.

​

ComfyUI Wan2.1 Fun Camera 14B 워크플로

​

Wan 2.1 Fun Camera 14B

전체 14B 모델을 사용하여 고급 카메라 제어로 고품질 비디오를 생성하세요.

Comfy Cloud에서 실행

Comfy Cloud에서 열기

워크플로 다운로드

JSON을 다운로드하거나 템플릿 라이브러리에서 “Wan 2.1 Fun Camera 14B”를 검색하세요

입력 자료

일치하는 LoadImage 노드에 이 파일을 업로드하세요:

video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

LoadImage 노드 52 · video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

​

성능 참고사항

1.3B 버전:

• RTX 4090에서 512×512 해상도로 81프레임 생성하는 데 약 72초 소요

14B 버전:

• RTX4090 24GB VRAM에서는 512×512 해상도 생성 시 메모리 부족 현상이 발생할 수 있으며, 더 큰 크기를 사용할 경우 A100에서도 메모리 문제가 발생했습니다.