NVIDIA simplifie la génération de vidéos IA 4K sur PC avec ComfyUI

ARKTechNews
15 avr.
2 min de lecture

NVIDIA et les développeurs de ComfyUI ont annoncé une série d’optimisations visant à simplifier la génération de vidéos par intelligence artificielle directement sur PC équipé d’une carte graphique GeForce RTX. L’objectif est de rendre la création de contenus vidéo générés par IA beaucoup plus accessible aux créateurs et développeurs, sans nécessiter d’infrastructures cloud coûteuses. Grâce aux technologies RTX et aux optimisations logicielles, il devient désormais possible de produire des séquences vidéo générées par IA en résolution 4K directement en local, en utilisant la puissance des cœurs Tensor présents sur les GPU RTX.

Une pipeline optimisée pour les GPU RTX

Les améliorations reposent notamment sur l’intégration d’optimisations spécifiques pour les GPU NVIDIA dans ComfyUI, un outil open source très utilisé pour les flux de travail basés sur les modèles de diffusion. Ces optimisations exploitent notamment de nouveaux formats de calcul comme NVFP8, qui permettent d’accélérer l’inférence des modèles tout en réduisant la consommation de mémoire vidéo. Selon NVIDIA, cette nouvelle pipeline peut accélérer la génération vidéo par IA jusqu’à trois fois et réduire significativement l’utilisation de VRAM, ce qui permet à davantage de configurations grand public de produire des vidéos générées par IA.

NVIDIA simplifie la génération de vidéos IA 4K sur PC avec ComfyUI

Le modèle LTX-2 au cœur du système

L’un des éléments clés de cette évolution est l’utilisation du modèle LTX-2, un modèle audio-vidéo open source capable de générer des séquences vidéo en haute résolution. Optimisé pour les GPU RTX, ce modèle peut produire des clips en 4K et jusqu’à 50 images par seconde dans certains scénarios. LTX-2 est conçu pour fonctionner efficacement sur des GPU grand public, ce qui réduit la dépendance aux centres de calcul spécialisés pour ce type de génération vidéo.

Upscaling et génération plus rapides

La technologie RTX Video Super Resolution joue également un rôle important dans cette chaîne de production. Elle permet de générer initialement une vidéo à résolution plus basse, puis de l’améliorer automatiquement en 4K grâce à l’IA. Cette approche permet de réduire drastiquement le temps de calcul. Par exemple, la génération d’une vidéo de 10 secondes en 4K peut passer d’environ 15 minutes à environ 3 minutes grâce à cette méthode combinée.

Un outil destiné aux créateurs et aux développeurs

Ces optimisations visent particulièrement les créateurs de contenus, les artistes et les développeurs de jeux vidéo qui utilisent l’IA pour la prévisualisation, le concept art ou le storyboard vidéo. En simplifiant l’interface et en optimisant les performances, NVIDIA et ComfyUI cherchent à démocratiser les workflows de génération vidéo par IA directement sur PC. Avec l’augmentation rapide des capacités de calcul des GPU RTX et l’arrivée de modèles vidéo de plus en plus performants, la génération vidéo locale pourrait devenir un outil courant pour la création numérique dans les prochaines années.

#nvidia #rtx #ia #video #4k #comfyui #generativeai #gpu #creation