La société de vidéo IA et de modélisation 3D Luma a publié un nouveau réseau neuronal appelé Ray3 Modify.
L'outil vous permet de modifier des vidéos existantes en utilisant des images de référence de personnages et en préservant le jeu de la vidéo originale.
Les utilisateurs peuvent spécifier un cadre de début et de fin pour que le modèle génère des matériaux intermédiaires.
La société a déclaré que Ray3 Modify résout le problème de la préservation des caractéristiques humaines lors de l'édition ou de la génération d'effets. LLM suit mieux la vidéo originale, en préservant les mouvements, le timing, la direction du regard et en transmettant les émotions d'origine. Cela permet aux studios d'utiliser des acteurs en direct dans des vidéos créatives.
Grâce à la nouvelle solution, les utilisateurs peuvent définir une référence de personnage pour la transformation vidéo en modifiant l'apparence de la personne. Les informations sur les costumes, l'apparence physique et l'identité sont conservées tout au long du tournage.
« Les modèles vidéo génératifs sont incroyablement expressifs, mais difficiles à contrôler. Ray3 Modify combine la richesse et le monde réel, donnant aux professionnels de la création un contrôle total. Ils peuvent capturer des performances devant la caméra, puis les modifier immédiatement : transformer des lieux, des costumes ou même « reprendre » une scène à l'aide de l'IA sans avoir à être à nouveau physiquement présents », a déclaré Amit Jain, co-fondateur et PDG de Luma AI.
Le nouveau modèle est disponible sur la plateforme Dream Machine. Cette sortie a coïncidé avec la levée de 900 millions de dollars d'investissement dans le cadre d'un cycle mené par le saoudien Humain. Les investisseurs existants du projet ont également rejoint le financement : a16z, Amplify Partners et Matrix Partners.
La startup prévoit de construire un cluster d'IA de 2 GW en Arabie Saoudite avec Humain.
Rappelons qu'en mai, des entreprises technologiques américaines ont conclu un accord avec une entreprise d'un pays arabe pour le développement à grande échelle de l'intelligence artificielle dans la région.
En décembre, la start-up d'IA Runway a publié un nouveau modèle vidéo, Gen 4.5, qui surpasse les solutions similaires de ses concurrents lors de tests indépendants.
Vous avez trouvé une erreur dans le texte ? Sélectionnez-le et appuyez sur CTRL+ENTRÉE
Newsletters ForkLog : restez à l’écoute de l’industrie Bitcoin !