Hunyuan Video-Generierungsanleitung (ComfyUI)

Dieses Tutorial bietet eine umfassende Anleitung zur Verwendung des Hunyuan Video Modells von Tencent in ComfyUI zur Text-zu-Video-Generierung. Wir führen Sie Schritt für Schritt durch den gesamten Prozess.

1. Installieren und Aktualisieren von ComfyUI auf die neueste Version

Wenn Sie ComfyUI noch nicht installiert haben, beziehen Sie sich bitte auf diese Abschnitte:

ComfyUI Installationsanleitung ComfyUI Aktualisierungsanleitung

Sie müssen ComfyUI auf die neueste Version installieren und aktualisieren, um auf den ‘EmptyHunyuanLatentVideo’ Knoten zugreifen zu können.

2. Modell-Download und Installation

HunyuanVideo benötigt die folgenden Modell-Dateien:

2.1 Hauptmodell-Datei

Laden Sie die folgende Datei von HunyuanVideo Hauptmodell Download-Seite herunter:

Dateiname	Größe	Verzeichnis
hunyuan_video_t2v_720p_bf16.safetensors	~25,6GB	ComfyUI/models/diffusion_models

2.2 Text-Encoder-Dateien

Laden Sie die folgenden Dateien von HunyuanVideo Text-Encoder Download-Seite herunter:

Dateiname	Größe	Verzeichnis
clip_l.safetensors	~246MB	ComfyUI/models/text_encoders
llava_llama3_fp8_scaled.safetensors	~9,09GB	ComfyUI/models/text_encoders

2.3 VAE Modell-Datei

Laden Sie die folgende Datei von HunyuanVideo VAE Download-Seite herunter:

Dateiname	Größe	Verzeichnis
hunyuan_video_vae_bf16.safetensors	~493MB	ComfyUI/models/vae

Verzeichnisstruktur des Modells

ComfyUI/├── models/│   ├── diffusion_models/│   │   └── hunyuan_video_t2v_720p_bf16.safetensors  # Hauptmodell-Datei│   ├── text_encoders/│   │   ├── clip_l.safetensors                       # CLIP Text-Encoder│   │   └── llava_llama3_fp8_scaled.safetensors      # LLaVA Text-Encoder│   └── vae/│       └── hunyuan_video_vae_bf16.safetensors       # VAE Modell-Datei

3. Workflow-Datei herunterladen

Laden Sie den HunyuanVideo Text-zu-Video Workflow herunter

Raw Json Format

Workflow-Dateiquelle: HunyuanVideo Workflow Download

Grundlegender Video-Generierungs-Workflow

HunyuanVideo unterstützt die folgenden Auflösungseinstellungen:

Auflösung	9:16 Verhältnis	16:9 Verhältnis	4:3 Verhältnis	3:4 Verhältnis	1:1 Verhältnis
540p	544×960×129f	960×544×129f	624×832×129f	832×624×129f	720×720×129f
720p (Empfohlen)	720×1280×129f	1280×720×129f	1104×832×129f	832×1104×129f	960×960×129f

4. Erklärung der Workflow-Knoten

4.1 Modell-Lade-Knoten

1. UNETLoader
   • Zweck: Hauptmodell-Datei laden
   • Parameter:
     • Modell: hunyuan_video_t2v_720p_bf16.safetensors
     • Gewichtstyp: default (kann den fp8-Typ wählen, wenn der Speicher nicht ausreicht)
2. DualCLIPLoader
   • Zweck: Text-Encoder-Modelle laden
   • Parameter:
     • CLIP 1: clip_l.safetensors
     • CLIP 2: llava_llama3_fp8_scaled.safetensors
     • Text-Encoder: hunyuan_video
3. VAELoader
   • Zweck: VAE-Modell laden
   • Parameter:
     • VAE-Modell: hunyuan_video_vae_bf16.safetensors

4.2 Wichtige Video-Generierungs-Knoten

1. EmptyHunyuanLatentVideo
   • Zweck: Video-Latentraum erstellen
   • Parameter:
     • Breite: Video-Breite (z.B. 848)
     • Höhe: Video-Höhe (z.B. 480)
     • Frame-Anzahl: Anzahl der Frames (z.B. 73)
     • Batch-Größe: Batch-Größe (Standard 1)
2. CLIPTextEncode
   • Zweck: Text-Prompt-Codierung
   • Parameter:
     • Text: Positive Prompts (beschreiben, was Sie generieren möchten)
     • Es wird empfohlen, detaillierte englische Beschreibungen zu verwenden
3. FluxGuidance
   • Zweck: Steuerung der Generierungsleitstärke
   • Parameter:
     • Guidance Scale: Leitstärke (Standard 6.0)
     • Höhere Werte machen die Ergebnisse näher an den Prompts, können jedoch die Videoqualität beeinträchtigen
4. KSamplerSelect
   • Zweck: Sampler auswählen
   • Parameter:
     • Sampler: Sampling-Methode (Standard euler)
     • Weitere Optionen: euler_ancestral, dpm++_2m, usw.
5. BasicScheduler
   • Zweck: Sampling-Scheduler festlegen
   • Parameter:
     • Scheduler: Planungsmethode (Standard simple)
     • Schritte: Sampling-Schritte (empfohlen 20-30)
     • Denoise: Denoising-Stärke (Standard 1.0)

4.3 Video-Dekodierungs- und Speicher-Knoten

1. VAEDecodeTiled
   • Zweck: Latentraum-Video in tatsächliches Video dekodieren
   • Parameter:
     • Fliesen-Größe: 256 (kann reduziert werden, wenn der Speicher nicht ausreicht)
     • Überlappung: 64 (kann reduziert werden, wenn der Speicher nicht ausreicht)
   Hinweis: Bevorzugen Sie VAEDecodeTiled gegenüber VAEDecode, da es speichereffizienter ist
2. SaveAnimatedWEBP
   • Zweck: Generiertes Video speichern
   • Parameter:
     • Dateiname-Präfix: Präfix des Dateinamens
     • FPS: Bildrate (Standard 24)
     • Lossless: Ob verlustfrei (Standard falsch)
     • Qualität: Qualität (0-100, Standard 80)
     • Filtertyp: Filtertyp (Standard default)

5. Tipps zur Parameteroptimierung

5.1 Speicheroptimierung

Bei Speicherproblemen:

1. Wählen Sie den fp8-Gewichtstyp im UNETLoader
2. Reduzieren Sie die Parameter tile_size und overlap in VAEDecodeTiled
3. Verwenden Sie eine niedrigere Videoauflösung und Frame-Anzahl

5.2 Optimierung der Generierungsqualität

1. Prompt-Optimierung[Subjektbeschreibung], [Aktionsbeschreibung], [Szenenbeschreibung], [Stilbeschreibung], [Qualitätsanforderungen]Beispiel:Anime-Stil Anime-Mädchen mit riesigen Fennek-Ohren und einem großen flauschigen Schwanz, sie hat lange blonde Haare und blaue Augen, trägt einen rosa Pullover und einen langen blauen Rock, der in einer schönen Landschaft im Freien mit schneebedeckten Bergen im Hintergrund läuft
2. Parameteranpassungen
   • Erhöhen Sie die Sampling-Schritte für bessere Qualität
   • Erhöhen Sie angemessen die Guidance Scale für bessere Texttreue
   • Passen Sie die FPS- und Videoqualitätsparameter nach Bedarf an

6. Häufige Probleme

1. Unzureichender Speicher
   • Beziehen Sie sich auf die Vorschläge im Abschnitt zur Speicheroptimierung
   • Schließen Sie andere speicherintensive Programme
   • Verwenden Sie niedrigere Videoauflösungseinstellungen
2. Langsame Generierungsgeschwindigkeit
   • Das ist normal, die Video-Generierung braucht Zeit
   • Kann die Sampling-Schritte und die Frame-Anzahl reduzieren
   • Verwenden Sie eine niedrigere Auflösung, um die Geschwindigkeit zu erhöhen
3. Qualitätsprobleme
   • Optimieren Sie die Prompt-Beschreibungen
   • Erhöhen Sie die Sampling-Schritte
   • Passen Sie die Guidance Scale an
   • Versuchen Sie verschiedene Sampler