Qu'est-ce que la multi-référence ? - RefVid
Transformez vos propres photos en vidéos en quelques minutes · Votre première vidéo est gratuite, sans filigrane
Première vidéo gratuite, sans carte
Qu'est-ce que la multi-référence ? En vidéo IA, la multi-référence consiste à donner au modèle plusieurs images de référence, et parfois des clips vidéo ou audio, des personnes, des produits et des lieux qui doivent apparaître, pour qu'il génère une nouvelle scène qui les conserve tous.
Les images disent qui et quoi est à l'écran ; le prompt dit ce qui se passe. Vous pouvez l'essayer dans le champ ci-dessus : ajoutez des photos d'une personne et d'un produit, décrivez la scène et cliquez sur Générer. Le premier clip de 5 secondes sur Kling 3.0 Omni est offert.
Mia : 4 photos
NOIR 07 : 3 photos
Multi-référence : définition en deux phrases
- La multi-référence est une façon de solliciter un modèle d'image ou de vidéo IA avec plusieurs fichiers de référence à la fois, chacun montrant un élément qui doit apparaître dans le résultat. Le modèle les traite comme une description des sujets, et non comme des images à animer, et construit une nouvelle scène autour d'eux.
- La référence unique utilise une seule image d'un seul sujet. La multi-référence en ajoute d'autres : plusieurs angles du même visage, une deuxième personne, un produit, un décor, un style et, sur certains modèles, un clip de mouvement ou une voix.
En quoi elle diffère de l'image en vidéo et des images de départ
- L'image en vidéo anime une seule image, qui reste la première image. Les images de début et de fin fixent des instants précis du clip. La multi-référence ne fixe ni l'un ni l'autre : elle indique au modèle qui et quoi conserver, si bien que le sujet peut apparaître sous de nouveaux angles et dans des lieux que les photos n'ont jamais montrés.
- C'est pourquoi la multi-référence garde un personnage ou un produit identique d'un clip à l'autre : chaque clip part du même jeu de références.
Quels modèles vidéo prennent en charge la multi-référence
- Kling 4 accepte jusqu'à 10 images de référence, et l'Omni Reference de Kling les regroupe en éléments pour que le modèle sache quelles photos montrent le même personnage. MiniMax H3 accepte jusqu'à 9 images, 3 clips vidéo et 3 clips audio. Wan 3.0 accepte jusqu'à 10 images, 5 vidéos et 5 clips audio, selon Alibaba Cloud. Seedance 2.5 accepte jusqu'à 30 images, selon ByteDance et fal.ai.
- RefVid fait tourner ces modèles et les autres modèles à référence, 9 au total, via fal.ai, et envoie à chacun vos photos enregistrées sous la forme qu'il attend.
Essayer la multi-référence en 3 étapes
- 1. Enregistrez chaque sujet à partir de 1 à 10 photos : une personne, un produit, un animal. Ajoutez-en jusqu'à 3 dans le champ ci-dessus, plus jusqu'à 7 images de lieux ou de styles.
- 2. Décrivez la scène et nommez chaque sujet, par exemple : @Mia prend @NOIR07 sur une table de café et tourne l'étiquette vers la caméra.
- 3. Cliquez sur Générer. Votre premier clip de 5 secondes sur Kling 3.0 Omni est offert ; ensuite, une vidéo coûte dès 2,99 $, un pack de crédits dès 9,90 $ et un abonnement dès 10 $ par mois.
Plus sur les modèles d’IA vidéo
Reference to video →
Questions fréquentes
Qu'est-ce que la multi-référence en vidéo IA ?
C'est le fait de donner au modèle vidéo plusieurs images de référence, et sur certains modèles des clips vidéo ou audio, des personnes, des produits et des lieux à conserver. Le modèle les lit comme une description des sujets et génère une nouvelle scène autour d'eux.
La multi-référence, est-ce la même chose qu'une planche de référence ?
Non. Une planche de référence est une seule image qui montre un personnage sous plusieurs angles. Elle peut être l'une des références d'une requête multi-référence, à côté de photos d'un produit ou d'un lieu.
Combien d'images de référence utiliser ?
Trois à cinq images nettes par sujet, qui couvrent les angles principaux. Des images en plus avec une autre tenue ou un autre éclairage dégradent le résultat au lieu de l'améliorer.
Puis-je essayer la multi-référence gratuitement ?
Oui. Sur RefVid, le premier clip de 5 secondes sur Kling 3.0 Omni est offert, sans carte et sans filigrane. Ensuite, une vidéo coûte dès 2,99 $, un pack de crédits dès 9,90 $ et un abonnement dès 10 $ par mois.
La multi-référence fonctionne-t-elle pour les produits ?
Oui. Enregistrez le produit sous son angle principal, de dos et en gros plan sur le logo, puis placez-le dans une scène, seul ou avec une personne. Le petit texte imprimé reste le point faible des modèles actuels.