Das System ersetzt die Stimme eines jeden Schauspielers durch die gleiche Stimme, nur in einer anderen Sprache.
Du musst Regestriert sein, um das angehängte Bild zusehen.
Nachdem Disney einen neuen Film auf Englisch veröffentlicht hat, wird das Unternehmen zurückgehen und es in bis zu 46 globalen Sprachen lokalisieren, um den Film einem möglichst breiten Publikum zugänglich zu machen. Dies ist ein massives Unterfangen, für das Disney eine ganze Abteilung hat - Disney Character Voices International Inc -, um die Aufgabe zu bewältigen. Und es ist nicht so, dass du Chris Pratt zurück in die Aufnahmekabine schnappst, um seine GotG III-Linien in Island und Swahili zu säumen - jede Version klingt angesichts der lokalen Synchronsprecher ein wenig anders. Aber mit einem neuen "AI-Synchronisations"-System von ElevenLabs könnten wir bald eine genaue Nachbildung von Pratts Stimme erhalten, unabhängig von der Sprache, die auf dem Bildschirm gesprochen wird.
ElevenLabs ist ein KI-Startup, das einen Sprachlonservice bietet, der es Abonnenten ermöglicht, fast identische Vokalisationen mit KI zu generieren, die auf einigen Minuten Audio-Sample-Uploads basieren. Nicht völlig überraschend, sobald das Feature in der Beta veröffentlicht wurde, wurde es sofort ausgenutzt, um Prominente zu verkörpern, manchmal sogar ohne ihr vorheriges Wissen und ihre Zustimmung.
Du musst angemeldet sein, um Medien zu sehen.
ElevenLabs behauptet, dass das System nicht nur "sprechende Inhalte in Minuten in eine andere Sprache übersetzen" kann, sondern auch einen neuen gesprochenen Dialog in der Zielsprache mit der eigenen Stimme des Schauspielers generiert. Oder zumindest eine KI, die Erholung erzeugte. Das System ist sogar in der Lage, die "Emotion und Intonation" des bestehenden Dialogfeldes aufrechtzuerhalten und diese auf die generierte Übersetzung zu übertragen.
"Es wird dem Publikum helfen, alle Inhalte zu genießen, die es möchte, unabhängig von der Sprache, die sie sprechen", sagte Mati Staniszewski, CEO von ElevenLabs, in einer Presseerklärung. "Und es wird bedeuten, dass Content-Ersteller leicht und authentisch auf ein weitaus größeres Publikum auf der ganzen Welt zugreifen können."
Quelle: engadget.com