Points clés
Wan2.1 excelle dans la précision réaliste, notamment :
Détails des mains : Rend les doigts et les textures.
Animation de dessins : Transforme des dessins statiques en clips.
Physique : Simule des effets comme des arbres qui plient.
Mouvement des cheveux : Anime les mèches de manière réaliste.
Interactions d’objets : Gère des interactions spatiales complexes.
Rendu de foules : Maintient la clarté dans les grandes scènes.
Via Novita AI, une vidéo 720P de 5 secondes coûte 0,40 $, avec des API faciles à utiliser. Wan2.1 combine abordabilité, accessibilité et précision dans la génération vidéo.
Explorer toute la puissance de Wan 2.1
Qu’est-ce que Wan 2.1 ?
Alibaba Cloud a franchi une étape importante en open-sourçant sa série de modèles IA Wan2.1 pour la génération vidéo. Cette initiative réduit les barrières d’accès pour les universitaires, les chercheurs et les utilisateurs commerciaux, leur permettant d’exploiter des capacités IA de pointe sans coûts initiaux substantiels. En rendant ces modèles librement disponibles, Alibaba Cloud favorise l’innovation et la collaboration dans les domaines de l’IA et de la génération vidéo.
Capacités polyvalentes de Wan2.1
Wan2.1 est un outil très polyvalent, excellant dans diverses tâches liées à la génération vidéo et image :
- Texte vers vidéo (T2V) : Convertit des invites textuelles en vidéos.
- Image vers vidéo (I2V) : Génère des vidéos à partir d’une seule image en entrée.
- Édition vidéo : Permet une édition assistée par IA pour améliorer la qualité et les effets vidéo.
- Texte vers image (T2I) : Transforme des descriptions textuelles en images fixes.
Une fonctionnalité remarquable de Wan2.1 est sa capacité à générer du texte en chinois et en anglais, ce qui en fait un pionnier de la génération vidéo multilingue. Ses robustes capacités de génération de texte renforcent son utilité dans divers cas d’utilisation.
Précision réaliste de Wan2.1
La série Wan2.1 se distingue par sa précision exceptionnelle dans la simulation de la physique et des détails du monde réel. Voici quelques-unes des capacités clés qui mettent en évidence ses performances :
a. Détails des mains
- Le modèle excelle dans le rendu des mains, affichant des détails précis comme les doigts individuels, les textures de la peau et même des accessoires comme des bagues.
b. Animation de dessins
- Wan2.1 peut transformer des dessins statiques en courts clips vidéo, ce qui en fait un outil puissant pour les animateurs et les artistes numériques.
c. Simulation physique
- Le modèle reproduit avec précision la physique du monde réel. Par exemple, il peut représenter une girafe suspendue la tête en bas à un arbre, avec la branche qui se plie de manière réaliste sous le poids.
d. Mouvement des cheveux
- Il rend avec précision le mouvement des cheveux dans les vidéos, montrant des mèches individuelles qui bougent naturellement lorsque les personnes tournent la tête.
e. Interactions d’objets
- Wan2.1 peut simuler des interactions complexes d’objets, garantissant que plusieurs objets interagissent de manière réaliste dans le même espace.
f. Rendu de foules
- Le modèle excelle dans le rendu de grandes foules où chaque individu reste distinct, produisant des scènes cohérentes et détaillées.
VBench de Wan 2.1
VBench est conçu pour fournir des informations précieuses sur les forces et les faiblesses des modèles individuels, facilitant une évaluation détaillée et objective. Ces informations éclairent non seulement les futures avancées dans la génération vidéo, mais contribuent également à améliorer les performances des modèles. Pour garantir la cohérence avec la perception humaine, VBench intègre des annotations de préférence humaine, renforçant ainsi sa pertinence et sa fiabilité en tant que référence. Le graphique ci-dessous met en évidence les performances de Wan2.1 :
de Alizila
Configuration matérielle requise pour Wan2.1
Wan2.1 propose plusieurs modèles adaptés à différents cas d’utilisation, chacun avec des exigences matérielles spécifiques. Vous trouverez ci-dessous un résumé détaillé de la configuration matérielle requise pour les quatre modèles Wan2.1 :
| Nom du modèle | Fonction | Support de résolution | Taille du modèle | Exigences matérielles | GPU recommandé |
|---|---|---|---|---|---|
| T2V-14B | Texte vers vidéo (T2V) | 480P / 720P | 14B | ⭐⭐⭐⭐ | A100 / RTX 3090 / RTX 4090 |
| I2V-14B-720P | Image vers vidéo (I2V) | 720P | 14B | ⭐⭐⭐⭐ | A100 / RTX 3090 / RTX 4090 |
| I2V-14B-480P | Image vers vidéo (I2V) | 480P | 14B | ⭐⭐⭐ | RTX 3090 / RTX 4070 Ti |
| T2V-1.3B | Texte vers vidéo (T2V) | Basse résolution | 1.3B | ⭐⭐ | RTX 3060 / RTX 4060 ou supérieur |
Exécuter Wan2.1 avec une API
Novita AI est une plateforme cloud IA qui offre aux développeurs un moyen simple de déployer des modèles IA via notre API, tout en fournissant un cloud GPU abordable et fiable pour construire et passer à l’échelle.
Novita propose des prix très compétitifs sur le marché.
Par exemple, une vidéo Wan 2.1 720P de 5 secondes coûte seulement 0,40 $ par vidéo.
Alors qu’une vidéo similaire sur Replicate coûte 1 $ par vidéo.
Étape 1 : Connectez-vous et accédez à la bibliothèque de modèles
Connectez-vous à votre compte et cliquez sur le bouton Bibliothèque de modèles.
Étape 2 : Choisissez votre modèle
Parcourez les options disponibles et sélectionnez le modèle qui correspond à vos besoins.
Étape 3 : Commencez votre essai gratuit
Démarrez votre essai gratuit pour explorer les capacités du modèle sélectionné.
Étape 4 : Obtenez votre clé API
Pour vous authentifier auprès de l’API, nous vous fournirons une nouvelle clé API. Rendez-vous sur la page « Paramètres », vous pouvez copier la clé API comme indiqué sur l’image.
Étape 5 : Installez l’API
Installez l’API à l’aide du gestionnaire de paquets spécifique à votre langage de programmation.
Après l’installation, importez les bibliothèques nécessaires dans votre environnement de développement. Initialisez l’API avec votre clé API pour commencer à interagir avec Novita AI LLM. Voici un exemple d’utilisation de l’API de complétion de chat pour les utilisateurs Python.
import requests
url = "https://api.novita.ai/v3/async/wan-t2v"
payload = {
"extra": {"webhook": {
"url": "<string>",
"test_mode": {
"enabled": True,
"return_task_status": "<string>"
}
}},
"model_name": "<string>",
"width": 123,
"height": 123,
"seed": 123,
"prompt": "<string>",
"frames": 123
}
headers = {
"Content-Type": "<content-type>",
"Authorization": "<authorization>"
}
response = requests.request("POST", url, json=payload, headers=headers)
print(response.text)
Foire aux questions
Quel matériel est nécessaire pour exécuter Wan2.1 ?
Des GPU hautes performances comme A100, RTX 3090 ou RTX 4090 sont recommandés pour les modèles 14B.
Les modèles d’entrée de gamme (ex. T2V-1.3B) peuvent fonctionner sur RTX 3060+ pour des tâches basse résolution.
Qu’est-ce qui rend Novita AI rentable pour Wan2.1 ?
Des tarifs compétitifs : 0,40 $ par vidéo 720P de 5 secondes contre 2,39 $ sur des plateformes similaires.
API facile à utiliser avec une documentation détaillée pour les développeurs.
Comment puis-je utiliser Wan2.1 via une API ?
Étapes pour utiliser Wan2.1 via Novita AI :
Connectez-vous et accédez à la bibliothèque de modèles.
Sélectionnez le modèle souhaité.
Commencez un essai gratuit pour explorer ses capacités.
Obtenez votre clé API dans la section Paramètres.
Installez et intégrez l’API dans votre environnement de développement.
Novita AI est la plateforme cloud tout-en-un qui propulse vos ambitions IA. API intégrées, serverless, instance GPU — les outils rentables dont vous avez besoin. Éliminez l’infrastructure, commencez gratuitement et réalisez votre vision IA.
