PaperGeek, actu geek et high tech

Actu geek

  •  Tendances
  • Codes secrets Netflix
  • Disney Plus
  • Xbox Series X
  • PS5
  • News
    • Apps et Logiciels
      • Mac
      • Mobile
      • PC
    • Bons plans
    • Culture Geek
    • Guide d’achat
    • Hardware
    • Insolite
    • Jeux video
    • Mobilité
    • Objets connectés
    • Opérateurs télécom
    • Sécurité
    • Science
    • Sport
    • Transport
    • Web
  • Comment faire
Accueil / Apps et Logiciels / Google : cette nouvelle IA est capable de générer des bruitages pour vos vidéos

Google : cette nouvelle IA est capable de générer des bruitages pour vos vidéos

Par David Laurent le 19 juin 2024

Google DeepMind vient de dévoiler V2A, une IA capable d’analyser une vidéo, puis d’en générer l’intégralité de la bande son. L’utilisateur peut également fournir des instructions écrites afin d’affiner le résultat.

L’IA est déjà capable de générer des vidéos. On pense notamment à Sora, un puissant générateur de vidéos développé par OpenAI (ChatGPT). Google a rapidement contre-attaqué en lançant Veo, une IA semblable à celle proposée par OpenAI. Mais la plupart de ces IA se contentent de générer des images, sans pour autant proposer la bande son qui va avec. Dans ce cadre, DeepMind, une sous-division de Google, vient de lancer une IA vouée à générer des sons en s’appuyant sur des vidéos. Celle-ci peut alors générer des bruitages, des effets sonores et même du doublage.

Loup
Crédit photo : Google

DeepMind affirme que son nouveau système peut générer « un nombre illimité de bandes sonores pour n’importe quelle entrée vidéo« . L’utilisateur peut simplement exprimer ses préférences afin d’affiner le travail de l’IA. Celui-ci peut, par exemple, écrire “moins de bruits de fond” ou encore “plus de bruit de voiture”.

V2A : une technologie loin d’être parfaite

L’un des points forts de cette nouvelle IA, baptisée V2A (Video To Audio), est sans doute le fait qu’elle est capable de synchroniser le son et l’image, une tâche habituellement plutôt fastidieuse pour les monteurs vidéos. DeepMind précise ainsi : « En s’entraînant sur la vidéo, l’audio et les annotations supplémentaires, notre technologie apprend à associer des événements audio spécifiques à diverses scènes visuelles, tout en répondant aux informations fournies dans les annotations ou les transcriptions« .

Toutefois, DeepMind va devoir affiner son IA, qui, pour l’instant, est loin d’être parfaite. En effet, la qualité audio de sortie dépend de la fidélité de l’entrée vidéo, et l’IA peut être perturbée par certains éléments à l’écran. Par conséquent, la génération de doublages et leur synchronisation peuvent parfois poser problème.

DeepMind précise ainsi : « V2A tente de générer de la parole à partir des transcriptions d’entrée et de la synchroniser avec les mouvements des lèvres des personnages. Mais le modèle de génération de vidéo jumelée peut ne pas être conditionné par les transcriptions. Cela crée un décalage, qui se traduit souvent par une synchronisation labiale étrange”.

Source : digitaltrends

Article précédent

Ce magnifique clip de type Pixar généré par l’IA défraie la chronique, les emplois des animateurs menacés ?

juin 17, 2024

Animation
Article suivant

OpenAI : un ancien responsable de l’entreprise lance sa propre société afin de créer une IA « superintelligente »

juin 20, 2024

Lignes de code
Notifications

Abonnez-vous pour recevoir les notifications sur smartphone, tablette ou pc selon vos préférences !

Newsletter

Abonnez-vous et recevez nos dernières actus & bons plans directement dans votre boite email.

Vérifiez votre boite de réception ou votre répertoire d’indésirables pour confirmer votre abonnement.

Barre latérale 1

Derniers articles
  • Voici les noms des métiers qui seront épargnés par l’IA, selon un expert
    Voici les noms des métiers qui seront épargnés par l’IA, selon un expert
    L’intelligence artificielle est en train de s’accaparer bon nombre d’emplois, c’est indéniable. Mais selon Adam Dorr, directeur de recherche chez RethinkX, certains emplois plutôt insolites pourraient être épargnés. Elon Musk…

    Il y a 4 heures et 42 secondes

    Apps et Logiciels

  • Intelligence artificielle : de plus en plus de jeunes considèrent l’IA comme une amie, selon cette étude
    Intelligence artificielle : de plus en plus de jeunes considèrent l’IA comme une amie, selon cette étude
    Des chatbots tels que ChatGPT d’OpenAI ou Gemini de Google peuvent parfois donner l’impression d’être de véritables humains. Dans ce cadre, une nouvelle étude a constaté que de nombreux jeunes…

    Il y a 1 jour et 3 heures

    Apps et Logiciels, Santé

  • xAI : l’entreprise d’Elon Musk présente ses excuses après les dérapages de Grok
    xAI : l’entreprise d’Elon Musk présente ses excuses après les dérapages de Grok
    Le chatbot Grok de xAI a récemment créé la polémique, celui-ci ayant tenu des propos jugés choquants. L’entreprise d’Elon Musk vient ainsi de présenter ses excuses, tout en tentant de…

    Il y a 1 jour et 3 heures

    Apps et Logiciels, Réseaux sociaux, Web

  • ChatGPT : Meta recrute des spécialistes chez OpenAI à prix d’or
    ChatGPT : Meta recrute des spécialistes chez OpenAI à prix d’or
    La concurrence est rude entre Meta et OpenAI. Ainsi, le propriétaire de Facebook, Instagram et WhatsApp offrirait des primes à l’embauche de plusieurs centaines de millions de dollars pour recruter…

    Il y a 5 jours et 4 heures

    Apps et Logiciels, Réseaux sociaux

Newsletter Papergeek

Inscrivez-vous et recevez gratuitement nos meilleures actus !

Vérifiez votre boite de réception ou votre répertoire d’indésirables pour confirmer votre abonnement.

© 2025 papergeek.fr : actus geek et high tech

  • Préférences cookies
  • Nous Contacter
  • Mentions légales
  • confidentialité
  • CGU
loading gif ×
Notifications

Recevoir les notifications

Réglages

Actualité
Bon plan