Panduan Penjanaan Video Hunyuan (ComfyUI)

Tutorial ini akan memberikan panduan menyeluruh tentang penggunaan model Video Hunyuan Tencent dalam ComfyUI untuk penjanaan teks-ke-video. Kami akan memandu anda melalui keseluruhan proses langkah demi langkah.

1. Pasang dan Kemas Kini ComfyUI ke Versi Terbaru

Jika anda belum memasang ComfyUI, sila rujuk kepada bahagian ini:

Panduan Pemasangan ComfyUI Panduan Kemas Kini ComfyUI

Anda perlu memasang dan mengemas kini ComfyUI ke versi terbaru untuk mengakses nod ‘EmptyHunyuanLatentVideo’.

2. Muat Turun dan Pemasangan Model

HunyuanVideo memerlukan fail model berikut:

2.1 Fail Model Utama

Muat turun fail berikut dari Halaman Muat Turun Model Utama HunyuanVideo:

Nama Fail	Saiz	Direktori
hunyuan_video_t2v_720p_bf16.safetensors	~25.6GB	ComfyUI/models/diffusion_models

2.2 Fail Pengekod Teks

Muat turun fail berikut dari Halaman Muat Turun Pengekod Teks HunyuanVideo:

Nama Fail	Saiz	Direktori
clip_l.safetensors	~246MB	ComfyUI/models/text_encoders
llava_llama3_fp8_scaled.safetensors	~9.09GB	ComfyUI/models/text_encoders

2.3 Fail Model VAE

Muat turun fail berikut dari Halaman Muat Turun VAE HunyuanVideo:

Nama Fail	Saiz	Direktori
hunyuan_video_vae_bf16.safetensors	~493MB	ComfyUI/models/vae

Rujukan Struktur Direktori Model

ComfyUI/├── models/│   ├── diffusion_models/│   │   └── hunyuan_video_t2v_720p_bf16.safetensors  # Fail model utama│   ├── text_encoders/│   │   ├── clip_l.safetensors                       # Pengekod teks CLIP│   │   └── llava_llama3_fp8_scaled.safetensors      # Pengekod teks LLaVA│   └── vae/│       └── hunyuan_video_vae_bf16.safetensors       # Fail model VAE

3. Muat Turun Fail Aliran Kerja

Muat turun Aliran Kerja Teks-ke-Video Hunyuan

Format Json Mentah

Sumber fail aliran kerja: Muat Turun Aliran Kerja HunyuanVideo

Aliran Kerja Penjanaan Video Asas

HunyuanVideo menyokong tetapan resolusi berikut:

Resolusi	Nisbah 9:16	Nisbah 16:9	Nisbah 4:3	Nisbah 3:4	Nisbah 1:1
540p	544×960×129f	960×544×129f	624×832×129f	832×624×129f	720×720×129f
720p (Disyorkan)	720×1280×129f	1280×720×129f	1104×832×129f	832×1104×129f	960×960×129f

4. Penjelasan Nod Aliran Kerja

4.1 Nod Memuat Model

1. UNETLoader
   • Tujuan: Memuat fail model utama
   • Parameter:
     • Model: hunyuan_video_t2v_720p_bf16.safetensors
     • Jenis Berat: default (boleh pilih jenis fp8 jika memori tidak mencukupi)
2. DualCLIPLoader
   • Tujuan: Memuat model pengekod teks
   • Parameter:
     • CLIP 1: clip_l.safetensors
     • CLIP 2: llava_llama3_fp8_scaled.safetensors
     • Pengekod Teks: hunyuan_video
3. VAELoader
   • Tujuan: Memuat model VAE
   • Parameter:
     • Model VAE: hunyuan_video_vae_bf16.safetensors

4.2 Nod Penjanaan Video Utama

1. EmptyHunyuanLatentVideo
   • Tujuan: Mencipta ruang laten video
   • Parameter:
     • Lebar: Lebar video (contoh, 848)
     • Tinggi: Tinggi video (contoh, 480)
     • Bilangan Frame: Bilangan bingkai (contoh, 73)
     • Saiz Batch: Saiz batch (default 1)
2. CLIPTextEncode
   • Tujuan: Pengekodan teks prompt
   • Parameter:
     • Teks: Prompt positif (huraikan apa yang anda ingin hasilkan)
     • Disyorkan untuk menggunakan penerangan terperinci dalam bahasa Inggeris
3. FluxGuidance
   • Tujuan: Mengawal kekuatan panduan penjanaan
   • Parameter:
     • Skala Panduan: Kekuatan panduan (default 6.0)
     • Nilai yang lebih tinggi menjadikan hasil lebih dekat kepada prompt tetapi mungkin mempengaruhi kualiti video
4. KSamplerSelect
   • Tujuan: Memilih sampler
   • Parameter:
     • Sampler: Kaedah pengambilan sampel (default euler)
     • Pilihan lain: euler_ancestral, dpm++_2m, dan lain-lain.
5. BasicScheduler
   • Tujuan: Menetapkan penjadual pengambilan sampel
   • Parameter:
     • Penjadual: Kaedah penjadualan (default simple)
     • Langkah: Langkah pengambilan sampel (disyorkan 20-30)
     • Denoise: Kekuatan pengurangan bunyi (default 1.0)

4.3 Nod Dekod dan Simpan Video

1. VAEDecodeTiled
   • Tujuan: Mendekod ruang laten video kepada video sebenar
   • Parameter:
     • Saiz Jubin: 256 (boleh dikurangkan jika memori tidak mencukupi)
     • Overlap: 64 (boleh dikurangkan jika memori tidak mencukupi)
   Nota: Utamakan VAEDecodeTiled berbanding VAEDecode kerana ia lebih efisien dalam penggunaan memori
2. SaveAnimatedWEBP
   • Tujuan: Menyimpan video yang dihasilkan
   • Parameter:
     • Awalan Nama Fail: Awalan nama fail
     • FPS: Kadar bingkai (default 24)
     • Tanpa Kehilangan: Sama ada tanpa kehilangan (default false)
     • Kualiti: Kualiti (0-100, default 80)
     • Jenis Penapis: Jenis penapis (default default)

5. Petua Pengoptimuman Parameter

5.1 Pengoptimuman Memori

Jika menghadapi masalah memori:

1. Pilih jenis berat fp8 dalam UNETLoader
2. Kurangkan parameter tile_size dan overlap dalam VAEDecodeTiled
3. Gunakan resolusi video dan bilangan bingkai yang lebih rendah

5.2 Pengoptimuman Kualiti Penjanaan

1. Pengoptimuman Prompt[Penerangan Subjek], [Penerangan Tindakan], [Penerangan Adegan], [Penerangan Gaya], [Keperluan Kualiti]Contoh:gaya anime gadis anime dengan telinga fennec yang besar dan satu ekor berbulu besar, dia mempunyai rambut panjang berwarna perang dengan mata biru mengenakan sweater merah jambu dan skirt biru panjang berjalan di pemandangan luar yang indah dengan gunung bersalji di latar belakang
2. Pelarasan Parameter
   • Tambah langkah pengambilan sampel untuk kualiti yang lebih baik
   • Sesuaikan Skala Panduan untuk pematuhan teks yang lebih baik
   • Sesuaikan parameter FPS dan kualiti video mengikut keperluan

6. Masalah Umum

1. Memori Tidak Mencukupi
   • Rujuk kepada cadangan bahagian pengoptimuman memori
   • Tutup program lain yang menggunakan memori
   • Gunakan tetapan resolusi video yang lebih rendah
2. Kelajuan Penjanaan Perlahan
   • Ini adalah normal, penjanaan video memerlukan masa
   • Boleh mengurangkan langkah pengambilan sampel dan bilangan bingkai
   • Gunakan resolusi yang lebih rendah untuk meningkatkan kelajuan
3. Masalah Kualiti
   • Optimumkan penerangan prompt
   • Tambah langkah pengambilan sampel
   • Sesuaikan Skala Panduan
   • Cuba sampler yang berbeza