Deepdub, La start-up israélienne de doublage avec l'intelligence artificielle a commencé à devenir sérieuse. La société a conclu un accord pour traduire le film «Every Time I Die», actuellement diffusé sur UK Netflix pour les Amériques.

Deepdub utilisera sa technologie de synthèse vocale AI pour doubler le film en espagnol d'Amérique latine et en portugais brésilien. Les versions résultantes contiendront des voix qui sonnent exactement comme celles des acteurs originaux.


Une révolution dans le doublage

«Nous capturerons avec précision le style vocal et les attributs vocaux des acteurs originaux, et ils seront adaptés à la langue cible», explique Oz Krakowski, PDG de Deepdub. "Dans ce cas, le doublage en espagnol latino-américain et en portugais brésilien nécessite des adaptations différentes."

Quelques informations sur Deepdub, la technologie qui peut transformer le monde du doublage (et même des films) grâce à l'intelligence artificielle:

Deepdub il est sorti tranquillement en décembre offrant des doublages basés sur l'IA pour des publicités et d'autres projets dans six langues cibles.
La copie d'un film complet prend plus de temps. Pour Krakowski, le processus pourrait prendre jusqu'à huit semaines. «Nous avons intégré des procédures de contrôle de qualité manuelles et automatiques avancées», dit-il. «Le processus comprend un directeur de doublage et un expert linguistique qui examine le résultat final. Leurs commentaires sont réinjectés dans la machine pour améliorer les résultats et affiner le processus automatique dans les projets futurs ».
Inutile de dire que l'IA est beaucoup moins chère que le doublage manuel. Des risques pour la profession de doubleur? Oui et non. Des opportunités pour les producteurs indépendants d'atteindre un public plus large pour leurs ?uvres? Oui bien sûr.

Et d'un autre côté, MiLa Media elle-même, qui a produit «Every Time I Die», a profité de cette possibilité. Ohad Ashkenazi, le PDG de MiLa Media, a l'intention de se tourner vers Netflix pour distribuer également des versions avec doublage dans d'autres langues, mais traite également directement avec plusieurs grands distributeurs sur le marché latino-américain.

Ce pourrait être la première fois pour toute l'industrie. Et même si Netflix ne diffuse pas plus tard les versions doublées, ce n'est qu'une question de temps avant qu'un film ou une émission de télévision sur ce service de streaming ne reçoive un doublage AI. Dans quelques années, cette technologie pourrait bouleverser les films tels que nous les connaissons.

Les acteurs étrangers les plus connus parleront dans notre langue avec le même timbre de voix qu'ils ont dans leur langue. Probablement un jour, le mouvement des lèvres changera également (la technologie est déjà à l'étude).

Voir: https://deepdub.ai/

Aflorithmic, entreprise de clonage audio, ramène la voix d'Einstein à la vie. Bien que cette entreprise soit à l'origine du deepfake, cet exploit n'a été possible que grâce au partenariat avec UneeQ. En effet, cette société de médias synthétiques est le concepteur du moteur qui, lui, alimente les constituants de cette version d'humain digitalisé. En d'autres mots, c'est l'hébergeur qui prendra en charge le chatbot sur son site internet.

Un aperçu du monde de demain

L'Einstein numérique serait, d'après Aflorithmic, un avant-goût de ce que sera le commerce social conversationnel dans le futur. Effectivement, l'on peut s'attendre à ce que plus tard, ces soi-disant deepfakes ressemblant comme deux gouttes d'eau à des héros ou personnages légendaires nous vendent des pizzas et des burgers. Du moins, c'est ce que prévoient les observateurs de ce secteur.


Un mix entre technologie et capital humain

Toujours selon Aflorithmic, le fait de redonner vie à ces personnages aurait des vertus sur le plan éducatif. Certes, on parle là de vie artificielle. Néanmoins, la voix d'Einstein n'est pas uniquement le fruit de la technologie. Dans le processus de modélisation du chatbot, la startup a collaboré avec un acteur donc une vraie personne. Sans cela, il serait peu probable que le vrai Einstein ait dans son jargon des termes comme « blockchain ». En plus d'un artifice IA, cette invention possède alors un apport humain.

Selon Matt Lehmann, COO d'Aflorithmic : « Il s'agit de la prochaine étape dans la présentation de la technologie permettant de rendre possible le commerce social conversationnel ». Aussi, malgré l'existence de nombreux défauts à aplanir puis des défis technologiques à surmonter, ce serait la meilleure façon de montrer où cela va mener.

Par ailleurs, l'entreprise partage dans un billet de blog les difficultés rencontrées ainsi que les progrès réalisés dans le cadre de la création de la voix d'Einstein. En effet, si le temps de réponse initial entre le retournement de texte d'entrée et l'API apte à rendre une réponse vocale était de 12 secondes, cela a été réduit à 3 secondes. Ce décalage non-négligeable permettra au robot d'être plus réactif.




Aflorithmic se prononce sur leur chatbot

Il est compréhensible que la législation protégeant les données d'une personne constitue un obstacle au développement de ce projet. Cependant, la startup rassure que ces clones numériques n'existent pas dans le but de bafouer l'image des personnages historiques. Cela dit, des droits de licence sont toujours valables. Pour le cas d'Albert Einstein, ces droits sont la propriété de l'Université hébraïque de Jérusalem. Ce dernier étant même un collaborateur dans ce projet.

Lehmann affirme même que la performance de clonage de la voix du scientifique a fait l'objet d'une licence d'artiste. D'après ses propos, Aflorithmic n'a pas cloné la voix d'Einstein en tant que telle. Ils se sont plutôt inspirés des films et enregistrements originaux pour ce faire. L'acteur qui a modélisé sa voix, lui, n'est plus ni moins qu'un grand admirateur du génie d'Einstein.