La fonctionnalité utilise la technologie de l’intelligence artificielle pour analyser la musique que les utilisateurs écoutent, leurs préférences et leur humeur actuelle afin de fournir un flux de chansons similaires et nouvelles que les utilisateurs peuvent apprécier, combinées à celles qu’ils aiment déjà.
Spotify a lancé son produit AI DJ aux États-Unis et au Canada le 22 février 2023.
Spotify
Mais l’outil, qui lancé aux États-Unis et au Canada début 2023, va au-delà de la création d’une playlist personnalisée. Il parle également aux utilisateurs et leur fournit des faits intéressants et des commentaires personnalisés sur les artistes et les genres qu’ils écoutent entre les chansons.
C’est là qu’intervient Jernigan : c’est la voix du DJ IA qui peut donner aux utilisateurs l’impression d’avoir leur propre DJ personnel dans leur poche.
« C’est une version numérisée de moi qui leur recommande toutes ces merveilleuses chansons et leur fournit ce contexte et cette narration grâce à l’avènement de l’IA », explique Jernigan à CNBC Make It.
Quelques mois après la fin de « The Get Up », le responsable de la personnalisation de Spotify a contacté Jernigan au sujet d’un nouveau produit sur lequel son équipe travaillait : un DJ alimenté par l’IA.
À NE PAS MANQUER : Atteignez le bien-être financier : soyez plus heureux, plus riche et plus en sécurité financière
À l’origine, le produit proposait une voix de substitution, mais l’équipe voulait qu’elle « ressemble davantage à X », explique-t-il. Ils l’ont donc contacté pour voir s’il serait intéressé à devenir un modèle vocal pour le DJ IA.
« Ce que j’ai aimé dans cette conversation, c’est qu’il s’agissait de créer un partenariat entre moi et Spotify et de faire en sorte que le produit soit également axé sur ma personnalité, pas seulement sur ma voix », explique Jernigan.
Jernigan dit que le responsable de la personnalisation de Spotify l’a approché pour devenir le modèle vocal du DJ IA.
Spotify
« J’avais une excellente compréhension de la manière de présenter les artistes au monde d’une manière qui leur permettait de se sentir vus et enthousiastes et de transformer les auditeurs occasionnels en fans », explique-t-il. « Cela ajoutait un niveau d’authenticité et de crédibilité à l’IA DJ. »
De plus, Jernigan dit que l’équipe voulait utiliser la compréhension approfondie du côté commercial de l’industrie de la musique qu’il a acquise en obtenant un MBA de la Florida Agricultural and Mechanical University et une maîtrise en commerce de la musique de l’Université de New York.
« Je dis en plaisantant que je suis l’une des rares personnes que je connaisse qui utilise tous mes diplômes tous les jours », dit-il.
Spotify utilise Sonantic, une plate-forme vocale IA dynamique de synthèse vocale. acquis en 2022et les technologies OpenAI pour alimenter son AI DJ.
Au cours des premières étapes de la formation du produit, l’équipe a pris près de 300 épisodes de « The Get Up », a isolé les pistes audio de Jernigan et a transmis ces données au DJ IA pour l’aider à analyser et à comprendre ses modèles de discours, sa hauteur, son rythme et ses émotions.
De plus, Jernigan conservait un document de notes sur son téléphone où il énumérait les phrases qu’il utilise dans les conversations quotidiennes lorsqu’il discute de musique.
De cette façon, à mesure que l’IA DJ a appris à ressembler à lui, elle a également pu apprendre à imiter la façon dont il parle et décrit naturellement la musique, puis utiliser cette compréhension pour générer des sorties audio au son réaliste.
« C’est pour cela que cela me ressemble tellement », dit-il. « Les autres modèles vocaux ont tendance à s’entraîner sur un ensemble de voix, puis à ajouter une couche par-dessus, mais celui-ci est entièrement entraîné sur moi et c’est là que la précision entre en jeu. »
La formation du DJ IA implique également des séances d’enregistrement, qui, selon Jernigan, sont similaires à du doublage, sauf qu’il lit les lignes et les scripts en tant que lui-même. Il s’efforce de paraître aussi naturel que possible pendant les séances d’enregistrement afin que le modèle IA apprenne à imiter les inflexions naturelles de sa voix.
Jernigan entraîne l’IA DJ à imiter ses modèles de discours naturels.
Spotify
« Je dois être précis, car nous devons apprendre au modèle vocal à quoi cela ressemble lorsque j’appuie sur un point, une pause ou une virgule », explique-t-il. « Je dois m’assurer de bien appuyer sur les T s’il y a un T à la fin d’un mot, car si je ne le fais pas, cela peut entraîner le modèle vocal à prononcer ce mot de manière incorrecte. »
Chaque semaine, Jernigan organise une réunion avec son équipe mondiale de rédacteurs, d’experts en musique et de conservateurs de données pour s’assurer que le modèle reste à jour avec les tendances actuelles et les actualités musicales.
Par exemple, lorsque les rappeurs Kendrick Lamar et Drake a laissé tomber plusieurs morceaux de diss se sont adressés les uns aux autres entre le 30 avril et le 5 mai, l’équipe de Jernigan a travaillé pour mettre à jour l’IA DJ avec des informations sur les chansons et le contexte de chaque artiste afin qu’il puisse aider les auditeurs à suivre la bataille de rap rapide.
Maintenant que l’IA DJ est capable d’imiter sa voix avec précision, lorsque des moments comme celui-ci se produisent, Jernigan travaille avec son équipe de rédacteurs pour alimenter ces informations dans le modèle aussi rapidement et aussi précisément que possible.
« Ces experts en musique culturelle, qui sont sur le terrain, sont capables d’informer l’IA de ce qui se passe dans le monde », explique-t-il. « Cela nous aide à rendre l’expérience DJ IA plus vivante. »
L’IA DJ de Spotify a été initialement déployée aux États-Unis et au Canada en février dernier, et est désormais disponible sur 68 marchés à travers le monde, dont l’Australie, la Nouvelle-Zélande et certains marchés d’Europe, d’Asie, d’Amérique latine et d’Afrique, indique la société.
Jernigan dit qu’au début, il était nerveux quant à la façon dont le monde l’accueillerait, lui et le DJ IA, mais cette peur a disparu une fois qu’il a commencé à voir à quel point les utilisateurs de Spotify appréciaient le produit.
« Les gens m’ont reconnu dans les rues de Londres et de Sydney, en Australie », dit-il. « C’est un honneur pour moi et l’amour que les gens ont pour moi montre qu’ils sont vraiment en contact avec l’humain qui se cache derrière le DJ IA. »
Jernigan dit que le fait d’être reconnu à l’échelle mondiale comme la voix du DJ IA de Spotify a été une expérience enrichissante.
Spotify
Et Spotify continue de développer son AI DJ original.
Le 17 juillet, la société Présentation de DJ Liviun DJ IA hispanophone inspiré de la voix de la rédactrice musicale principale de l’entreprise, Olivia Quiroz Roa.
Les utilisateurs de Spotify Premium sur certains marchés ont désormais la possibilité de choisir entre écouter DJ Livi commenter la musique en espagnol et DJ X le faire en anglais.
« Le lancement de DJ en espagnol était une étape naturelle dans l’évolution du produit, et nous sommes ravis que le monde entier rencontre Livi », Spotify a déclaré dans un article de blog.
Mais à mesure que le produit se développe, Jernigan dit que les auditeurs ne devraient pas s’inquiéter de la disparition de sa voix ou de DJ X de sitôt.
« Nous allons continuer à innover et à itérer, mais je pense que vous pouvez vous attendre à ce que je sois la voix pendant un certain temps », dit-il.
Vous voulez arrêter de vous soucier de l’argent ? Inscrivez-vous au nouveau cours en ligne de CNBC Atteignez le bien-être financier : soyez plus heureux, plus riche et plus en sécurité financièreNous vous enseignerons la psychologie de l’argent, comment gérer le stress et créer des habitudes saines, ainsi que des moyens simples pour augmenter votre épargne, vous désendetter et investir pour l’avenir. Commencez dès aujourd’hui et utilisez le code EARLYBIRD pour bénéficier d’une remise de lancement de 30 % jusqu’au 2 septembre 2024.
Plus, Inscrivez-vous à la newsletter de CNBC Make It pour obtenir des conseils et astuces pour réussir au travail, avec l’argent et dans la vie.
2024-07-27 16:00:01
1722086765
#Comment #Xavier #Jernigan #est #devenu #voix #Spotify
