Guide de génération vidéo Hunyuan (ComfyUI)

Ce tutoriel vous fournira un guide complet sur l'utilisation du modèle vidéo Hunyuan de Tencent dans ComfyUI pour la génération de texte à vidéo. Nous vous guiderons à travers tout le processus étape par étape.

1. Installer et mettre à jour ComfyUI vers la dernière version

Si vous n'avez pas encore installé ComfyUI, veuillez vous référer à ces sections :

Guide d'installation de ComfyUI Guide de mise à jour de ComfyUI

Vous devrez installer et mettre à jour ComfyUI vers la dernière version pour accéder au nœud ‘EmptyHunyuanLatentVideo’.

2. Téléchargement et installation du modèle

HunyuanVideo nécessite les fichiers de modèle suivants :

2.1 Fichier de modèle principal

Téléchargez le fichier suivant depuis Page de téléchargement du modèle principal HunyuanVideo :

Nom de fichier	Taille	Répertoire
hunyuan_video_t2v_720p_bf16.safetensors	~25.6GB	ComfyUI/models/diffusion_models

2.2 Fichiers d'encodeur de texte

Téléchargez les fichiers suivants depuis Page de téléchargement de l'encodeur de texte HunyuanVideo :

Nom de fichier	Taille	Répertoire
clip_l.safetensors	~246MB	ComfyUI/models/text_encoders
llava_llama3_fp8_scaled.safetensors	~9.09GB	ComfyUI/models/text_encoders

2.3 Fichier de modèle VAE

Téléchargez le fichier suivant depuis Page de téléchargement VAE HunyuanVideo :

Nom de fichier	Taille	Répertoire
hunyuan_video_vae_bf16.safetensors	~493MB	ComfyUI/models/vae

Référence de la structure du répertoire du modèle

ComfyUI/├── models/│   ├── diffusion_models/│   │   └── hunyuan_video_t2v_720p_bf16.safetensors  # Fichier de modèle principal│   ├── text_encoders/│   │   ├── clip_l.safetensors                       # Encodeur de texte CLIP│   │   └── llava_llama3_fp8_scaled.safetensors      # Encodeur de texte LLaVA│   └── vae/│       └── hunyuan_video_vae_bf16.safetensors       # Fichier de modèle VAE

3. Téléchargement du fichier de flux de travail

Téléchargez le flux de travail HunyuanVideo pour la génération de texte à vidéo

Format Json brut

Source du fichier de flux de travail : Téléchargement du flux de travail HunyuanVideo

Flux de travail de génération vidéo de base

HunyuanVideo prend en charge les paramètres de résolution suivants :

Résolution	Ratio 9:16	Ratio 16:9	Ratio 4:3	Ratio 3:4	Ratio 1:1
540p	544×960×129f	960×544×129f	624×832×129f	832×624×129f	720×720×129f
720p (Recommandé)	720×1280×129f	1280×720×129f	1104×832×129f	832×1104×129f	960×960×129f

4. Explication des nœuds de flux de travail

4.1 Nœuds de chargement du modèle

1. UNETLoader
   • But : Charger le fichier de modèle principal
   • Paramètres :
     • Modèle : hunyuan_video_t2v_720p_bf16.safetensors
     • Type de poids : default (peut choisir le type fp8 si la mémoire est insuffisante)
2. DualCLIPLoader
   • But : Charger les modèles d'encodeur de texte
   • Paramètres :
     • CLIP 1 : clip_l.safetensors
     • CLIP 2 : llava_llama3_fp8_scaled.safetensors
     • Encodeur de texte : hunyuan_video
3. VAELoader
   • But : Charger le modèle VAE
   • Paramètres :
     • Modèle VAE : hunyuan_video_vae_bf16.safetensors

4.2 Nœuds clés de génération vidéo

1. EmptyHunyuanLatentVideo
   • But : Créer l'espace latent vidéo
   • Paramètres :
     • Largeur : Largeur de la vidéo (ex. : 848)
     • Hauteur : Hauteur de la vidéo (ex. : 480)
     • Nombre de frames : Nombre de frames (ex. : 73)
     • Taille du lot : Taille du lot (par défaut 1)
2. CLIPTextEncode
   • But : Encodage du prompt textuel
   • Paramètres :
     • Texte : Prompts positifs (décrivez ce que vous voulez générer)
     • Il est recommandé d'utiliser des descriptions détaillées en anglais
3. FluxGuidance
   • But : Contrôler la force de guidage de la génération
   • Paramètres :
     • Échelle de guidage : Force de guidage (par défaut 6.0)
     • Des valeurs plus élevées rapprochent les résultats des prompts mais peuvent affecter la qualité vidéo
4. KSamplerSelect
   • But : Sélectionner le sampler
   • Paramètres :
     • Sampler : Méthode d'échantillonnage (par défaut euler)
     • Autres options : euler_ancestral, dpm++_2m, etc.
5. BasicScheduler
   • But : Définir le planificateur d'échantillonnage
   • Paramètres :
     • Planificateur : Méthode de planification (par défaut simple)
     • Étapes : Étapes d'échantillonnage (recommandé 20-30)
     • Dénombrement : Force de débruitage (par défaut 1.0)

4.3 Nœuds de décodage et de sauvegarde vidéo

1. VAEDecodeTiled
   • But : Décoder la vidéo de l'espace latent en vidéo réelle
   • Paramètres :
     • Taille de tuile : 256 (peut être réduite si la mémoire est insuffisante)
     • Chevauchement : 64 (peut être réduit si la mémoire est insuffisante)
   Remarque : Préférez VAEDecodeTiled à VAEDecode car il est plus efficace en mémoire
2. SaveAnimatedWEBP
   • But : Sauvegarder la vidéo générée
   • Paramètres :
     • Préfixe de nom de fichier : Préfixe du nom de fichier
     • FPS : Taux de frames (par défaut 24)
     • Sans perte : Si sans perte (par défaut faux)
     • Qualité : Qualité (0-100, par défaut 80)
     • Type de filtre : Type de filtre (par défaut default)

5. Conseils d'optimisation des paramètres

5.1 Optimisation de la mémoire

Si vous rencontrez des problèmes de mémoire :

1. Choisissez le type de poids fp8 dans UNETLoader
2. Réduisez les paramètres tile_size et overlap dans VAEDecodeTiled
3. Utilisez une résolution vidéo et un nombre de frames inférieurs

5.2 Optimisation de la qualité de génération

1. Optimisation du prompt[Description du sujet], [Description de l'action], [Description de la scène], [Description du style], [Exigences de qualité]Exemple :style anime, fille anime avec de grandes oreilles de fennec et une grande queue duveteuse, elle a de longs cheveux blonds et des yeux bleus, portant un pull rose et une longue jupe bleue, marchant dans un beau paysage extérieur avec des montagnes enneigées en arrière-plan
2. Ajustements des paramètres
   • Augmentez les étapes d'échantillonnage pour une meilleure qualité
   • Augmentez de manière appropriée l'échelle de guidage pour une meilleure adhérence au texte
   • Ajustez les paramètres FPS et qualité vidéo selon vos besoins

6. Problèmes courants

1. Mémoire insuffisante
   • Référez-vous aux suggestions de la section optimisation de la mémoire
   • Fermez d'autres programmes consommant de la mémoire
   • Utilisez des paramètres de résolution vidéo inférieurs
2. Vitesse de génération lente
   • C'est normal, la génération vidéo prend du temps
   • Vous pouvez réduire les étapes d'échantillonnage et le nombre de frames
   • Utilisez une résolution inférieure pour augmenter la vitesse
3. Problèmes de qualité
   • Optimisez les descriptions des prompts
   • Augmentez les étapes d'échantillonnage
   • Ajustez l'échelle de guidage
   • Essayez différents samplers