Guide de génération vidéo Hunyuan (ComfyUI)

Ce tutoriel vous fournira un guide complet sur l'utilisation du modèle vidéo Hunyuan de Tencent dans ComfyUI pour la génération de texte à vidéo. Nous vous guiderons à travers tout le processus étape par étape.

1. Installer et mettre à jour ComfyUI vers la dernière version

Si vous n'avez pas encore installé ComfyUI, veuillez vous référer à ces sections :

Guide d'installation de ComfyUI Guide de mise à jour de ComfyUI

Vous devrez installer et mettre à jour ComfyUI vers la dernière version pour accéder au nœud ‘EmptyHunyuanLatentVideo’.

2. Téléchargement et installation du modèle

HunyuanVideo nécessite les fichiers de modèle suivants :

2.1 Fichier de modèle principal

Téléchargez le fichier suivant depuis Page de téléchargement du modèle principal HunyuanVideo :

Nom de fichier	Taille	Répertoire
hunyuan_video_t2v_720p_bf16.safetensors	~25.6GB	ComfyUI/models/diffusion_models

2.2 Fichiers d'encodeur de texte

Téléchargez les fichiers suivants depuis Page de téléchargement de l'encodeur de texte HunyuanVideo :

Nom de fichier	Taille	Répertoire
clip_l.safetensors	~246MB	ComfyUI/models/text_encoders
llava_llama3_fp8_scaled.safetensors	~9.09GB	ComfyUI/models/text_encoders

2.3 Fichier de modèle VAE

Téléchargez le fichier suivant depuis Page de téléchargement VAE HunyuanVideo :

Nom de fichier	Taille	Répertoire
hunyuan_video_vae_bf16.safetensors	~493MB	ComfyUI/models/vae

Référence de la structure du répertoire du modèle

ComfyUI/├── models/│   ├── diffusion_models/│   │   └── hunyuan_video_t2v_720p_bf16.safetensors  # Fichier de modèle principal│   ├── text_encoders/│   │   ├── clip_l.safetensors                       # Encodeur de texte CLIP│   │   └── llava_llama3_fp8_scaled.safetensors      # Encodeur de texte LLaVA│   └── vae/│       └── hunyuan_video_vae_bf16.safetensors       # Fichier de modèle VAE

3. Téléchargement du fichier de flux de travail

Téléchargez le flux de travail HunyuanVideo pour la génération de texte à vidéo

Format Json brut

Source du fichier de flux de travail : Téléchargement du flux de travail HunyuanVideo

Flux de travail de génération vidéo de base

HunyuanVideo prend en charge les paramètres de résolution suivants :

Résolution	Ratio 9:16	Ratio 16:9	Ratio 4:3	Ratio 3:4	Ratio 1:1
540p	544×960×129f	960×544×129f	624×832×129f	832×624×129f	720×720×129f
720p (Recommandé)	720×1280×129f	1280×720×129f	1104×832×129f	832×1104×129f	960×960×129f

4. Explication des nœuds de flux de travail

4.1 Nœuds de chargement du modèle

UNETLoader
- But : Charger le fichier de modèle principal
- Paramètres :
  - Modèle : hunyuan_video_t2v_720p_bf16.safetensors
  - Type de poids : default (peut choisir le type fp8 si la mémoire est insuffisante)
DualCLIPLoader
- But : Charger les modèles d'encodeur de texte
- Paramètres :
  - CLIP 1 : clip_l.safetensors
  - CLIP 2 : llava_llama3_fp8_scaled.safetensors
  - Encodeur de texte : hunyuan_video
VAELoader
- But : Charger le modèle VAE
- Paramètres :
  - Modèle VAE : hunyuan_video_vae_bf16.safetensors

4.2 Nœuds clés de génération vidéo

EmptyHunyuanLatentVideo
- But : Créer l'espace latent vidéo
- Paramètres :
  - Largeur : Largeur de la vidéo (ex. : 848)
  - Hauteur : Hauteur de la vidéo (ex. : 480)
  - Nombre de frames : Nombre de frames (ex. : 73)
  - Taille du lot : Taille du lot (par défaut 1)
CLIPTextEncode
- But : Encodage du prompt textuel
- Paramètres :
  - Texte : Prompts positifs (décrivez ce que vous voulez générer)
  - Il est recommandé d'utiliser des descriptions détaillées en anglais
FluxGuidance
- But : Contrôler la force de guidage de la génération
- Paramètres :
  - Échelle de guidage : Force de guidage (par défaut 6.0)
  - Des valeurs plus élevées rapprochent les résultats des prompts mais peuvent affecter la qualité vidéo
KSamplerSelect
- But : Sélectionner le sampler
- Paramètres :
  - Sampler : Méthode d'échantillonnage (par défaut euler)
  - Autres options : euler_ancestral, dpm++_2m, etc.
BasicScheduler
- But : Définir le planificateur d'échantillonnage
- Paramètres :
  - Planificateur : Méthode de planification (par défaut simple)
  - Étapes : Étapes d'échantillonnage (recommandé 20-30)
  - Dénombrement : Force de débruitage (par défaut 1.0)

4.3 Nœuds de décodage et de sauvegarde vidéo

VAEDecodeTiled
- But : Décoder la vidéo de l'espace latent en vidéo réelle
- Paramètres :
  - Taille de tuile : 256 (peut être réduite si la mémoire est insuffisante)
  - Chevauchement : 64 (peut être réduit si la mémoire est insuffisante)
Remarque : Préférez VAEDecodeTiled à VAEDecode car il est plus efficace en mémoire
SaveAnimatedWEBP
- But : Sauvegarder la vidéo générée
- Paramètres :
  - Préfixe de nom de fichier : Préfixe du nom de fichier
  - FPS : Taux de frames (par défaut 24)
  - Sans perte : Si sans perte (par défaut faux)
  - Qualité : Qualité (0-100, par défaut 80)
  - Type de filtre : Type de filtre (par défaut default)

5. Conseils d'optimisation des paramètres

5.1 Optimisation de la mémoire

Si vous rencontrez des problèmes de mémoire :

Choisissez le type de poids fp8 dans UNETLoader
Réduisez les paramètres tile_size et overlap dans VAEDecodeTiled
Utilisez une résolution vidéo et un nombre de frames inférieurs

5.2 Optimisation de la qualité de génération

Optimisation du prompt[Description du sujet], [Description de l'action], [Description de la scène], [Description du style], [Exigences de qualité]Exemple :style anime, fille anime avec de grandes oreilles de fennec et une grande queue duveteuse, elle a de longs cheveux blonds et des yeux bleus, portant un pull rose et une longue jupe bleue, marchant dans un beau paysage extérieur avec des montagnes enneigées en arrière-plan
Ajustements des paramètres
- Augmentez les étapes d'échantillonnage pour une meilleure qualité
- Augmentez de manière appropriée l'échelle de guidage pour une meilleure adhérence au texte
- Ajustez les paramètres FPS et qualité vidéo selon vos besoins

6. Problèmes courants

Mémoire insuffisante
- Référez-vous aux suggestions de la section optimisation de la mémoire
- Fermez d'autres programmes consommant de la mémoire
- Utilisez des paramètres de résolution vidéo inférieurs
Vitesse de génération lente
- C'est normal, la génération vidéo prend du temps
- Vous pouvez réduire les étapes d'échantillonnage et le nombre de frames
- Utilisez une résolution inférieure pour augmenter la vitesse
Problèmes de qualité
- Optimisez les descriptions des prompts
- Augmentez les étapes d'échantillonnage
- Ajustez l'échelle de guidage
- Essayez différents samplers