Big Ocean on stage

Milos Schmidt

Ce boys band de K-pop malentendant utilise l’IA pour les aider à chanter

Dans un monde conçu pour les entendants, les débuts du premier boys band K-pop malentendant ont été rendus possibles grâce aux technologies avancées.

Dans le monde scintillant de la K-pop, où les routines de danse synchronisées et les harmonies parfaites règnent en maître, un boys band entièrement composé de membres malentendants brise les codes.

Parmi les membres de Big Ocean, Jiseok est né avec une perte auditive, tandis que Hyunjin et Chanyeon ont perdu une partie de leur audition à l’âge de trois et 11 ans, respectivement.

Avant de se former pour devenir des idoles de K-pop, les membres de Big Ocean suivaient des chemins complètement différents : Jiseok était un skieur alpin, Hyunjin était un YouTubeur et Chanyeon était un audiologiste.

Pourtant, ils nourrissaient tous le rêve de devenir des stars et de défier les préjugés envers les personnes handicapées.

Leur nouveau groupe a fait ses débuts le 20 avril, à l’occasion de la Journée des personnes handicapées en Corée du Sud.

« Notre mission ne s’adresse pas uniquement aux personnes ayant des capacités uniques. Elle s’adresse à tous ceux qui font face à leurs propres défis », a déclaré Hyunjin, le chanteur principal de Big Ocean, à L’Observatoire de l’Europe Next.

« Nous voulons que vous sachiez que peu importe ce que vous traversez, vous n’êtes pas seul », a ajouté Hyunjin.

Besoin de repères visuels

Le chemin vers la célébrité dans la K-pop est notoirement difficile, exigeant souvent des années d’entraînement exténuant. Pour Big Ocean, ces défis ont été amplifiés par le désir de changer les perceptions.

Les membres du groupe et sa société de gestion, Parastar Entertainment, affirment que la technologie a joué un rôle important en aidant Big Ocean à devenir des artistes K-pop.

Les trois membres de Big Ocean portent des prothèses auditives, et deux d’entre eux ont subi une intervention chirurgicale pour implanter leur cochlée. Les implants cochléaires fonctionnent en contournant l’oreille interne endommagée et en stimulant directement le nerf auditif avec des signaux électriques, permettant au cerveau de percevoir le son, tandis que les prothèses auditives sont des appareils portables qui amplifient les sons externes.

L’un des défis consistait à synchroniser leurs mouvements de danse, car chaque membre utilise des aides auditives différentes.

« S’ils dansaient un par un, ils étaient presque parfaits. Mais quand ils dansaient ensemble, c’était totalement différent », a déclaré Haley Cha, PDG de Parastar Entertainment, à L’Observatoire de l’Europe Next.

Par frustration, l’entraîneur de danse de Big Ocean a commencé à applaudir bruyamment au rythme, et Cha a remarqué que les membres étaient plus synchronisés.

« Nous avons découvert plus tard que ce n’était pas à cause du bruit des claquements de mains, mais à cause de leur visuel. Nous avions donc une idée du fait qu’ils se sentaient mieux grâce à des indices visuels. C’est ainsi que nous avons conçu un écran pour lui donner la lumière clignotante », a déclaré Cha.

Depuis lors, Big Ocean a commencé à pratiquer la chorégraphie en utilisant des métronomes à vibrations sur des montres intelligentes et des métronomes à lampe de poche sur l’écran.

« Nous avons utilisé un système de métronome visuel et sensoriel parce qu’ils n’entendaient pas parfaitement la musique. Nous avons fabriqué une lumière clignotante pour qu’ils puissent voir les rythmes de manière visuelle », a déclaré Cha.

Un premier film rendu possible grâce à l’IA et aux technologies avancées

Pour les personnes malentendantes, chanter peut présenter des difficultés pour percevoir avec précision la hauteur et le rythme.

Pour garantir que la voix de chaque membre réponde aux normes de l’industrie, Big Ocean a utilisé une technologie de conversion vocale pour modifier et améliorer les performances vocales en collaboration avec les sociétés de production musicale coréennes Muble et Samsong E&M.

« Comme tous les membres de Big Ocean sont sourds, il leur était physiquement difficile de chanter avec une prononciation ou une hauteur de voix précise », a déclaré Hans Choo, producteur en chef de Muble, à L’Observatoire de l’Europe Next. « Nous avons transformé les voix des membres de Big Ocean en modèles d’IA, puis nous avons utilisé ces modèles pour déduire des voix capables de capturer leurs caractéristiques individuelles. »

La première chanson de Big Ocean a été réalisée en appliquant les modèles d’IA à un guide vocal enregistré par le rappeur coréen Mac Curly.

Selon Muble, son service de conversion vocale IA utilise la technologie d’apprentissage automatique pour convertir ou générer des voix.

« En utilisant cela, il est possible soit d’apprendre à reproduire la voix d’une personne spécifique, soit de créer des voix entièrement nouvelles qui n’ont jamais été entendues auparavant », a déclaré Choo.

« Pour Big Ocean, par exemple, nous avons utilisé l’IA pour apprendre la voix de chaque membre, puis nous avons créé certaines sections qu’ils trouvaient difficiles à chanter eux-mêmes. »

Selon Parastar Entertainment, il a fallu près de trois mois pour rassembler les voix parlées, conversationnelles, chantées et même rappées des membres de Big Ocean en coréen et en anglais pour atteindre le résultat souhaité de chant pour la première chanson, qui a été raccourci à seulement quelques semaines pour leurs chansons ultérieures.

Au cours de deux sessions au studio d’enregistrement de Muble, le groupe a enregistré environ 500 prises pour former des modèles d’IA de haute qualité pour chaque membre. En règle générale, la production de nouveaux albums peut prendre jusqu’à 200 à 300 prises, selon Muble.

« Pour Big Ocean, l’objectif était de produire un son naturel et cohérent, nous ne nous sommes donc pas appuyés uniquement sur la technologie », a déclaré Choo.

L'affiche du boys band Big Ocean.
L’affiche du boys band Big Ocean.

« Il existe aujourd’hui de nombreuses technologies d’intelligence artificielle, mais il existe encore des limites importantes à la production d’un son naturel uniquement en collectant des données vocales enregistrées », a ajouté Hoseon Lee, fondateur de Samsong E&M et de Muble. « C’est particulièrement vrai pour la langue coréenne, où c’est extrêmement difficile, voire impossible. »

La société de production musicale a créé des modèles distincts pour différentes langues et différentes parties de la chanson afin d’affiner les produits finaux.

« Lorsque nous avons écouté la version complète, elle nous a profondément touchés. Nous avons entendu dire que de nombreuses personnes qui l’ont écoutée se sont senties profondément touchées et ont même pleuré », a déclaré Choo.

Cha de Parastar compare l’utilisation par Big Ocean de la conversion vocale par IA à la mise à niveau numérique du son de la chanson, malgré les inquiétudes mondiales croissantes concernant les pertes d’emplois pour les acteurs de doublage et les problèmes de droits d’auteur liés à ces technologies.

En mai, le mode vocal ChatGPT d’Open AI a fait l’objet d’une controverse car il ressemblait à celui de l’actrice Scarlett Johansson, par exemple.

« Dans l’histoire de la musique, lorsque la station de travail audio numérique (DAW) a été introduite pour la première fois pour remplacer le processus manuel, on a également discuté en public de la question de savoir si cela enlevait l’authenticité de la musique », a écrit Cha dans un e-mail.

« Tant que l’IA ne viole pas les droits actuels d’un artiste et qu’elle est utilisée dans un système organisé, je pense personnellement qu’elle deviendra bientôt une nouvelle norme », a-t-elle ajouté.

Elle a ajouté que toutes les parties prenant part à la production sont reconnues pour leur rôle et rémunérées pour cela.

Les experts estiment que les technologies émergentes comme la conversion vocale par l’IA augmenteront l’accessibilité à la musique.

« Si nous considérons la musique comme un langage commun qui peut nous élever et nous unir, alors la mise à disposition d’outils comme l’IA pour les artistes de toutes les identités peut considérablement élargir la diversité des voix dans la musique », a déclaré Rachel Alina, professeure adjointe au département de production musicale et d’ingénierie du Berklee College of Music, à L’Observatoire de l’Europe Next.

« Big Ocean est un exemple éclatant de la manière dont la technologie peut permettre à ceux qui auraient pu être mis à l’écart des processus traditionnels de création musicale de partager leurs histoires et leurs talents avec le monde », a-t-elle déclaré.

Toutefois, les experts préviennent que même si l’avenir de cette technologie est passionnant, il implique d’importantes responsabilités, notamment en ce qui concerne les conséquences d’un accès inégal.

« À mesure que ces technologies deviennent plus largement accessibles, l’écart entre ceux qui y ont accès et ceux qui n’y ont pas accès va rapidement se creuser », a déclaré Ben Camp, professeur de composition au Berklee College of Music, à L’Observatoire de l’Europe Next dans un courriel. « J’espère que la disponibilité et l’accessibilité seront autant prioritaires que le développement », a-t-il ajouté.

Alina a noté qu’il existe également un risque qu’une dépendance excessive à l’IA conduise à une perte de la « touche humaine nuancée » qui rend la musique si puissante émotionnellement.

« Mais comme nous l’avons vu avec d’autres avancées technologiques dans tous les domaines créatifs, ces nouveaux outils donneront probablement naissance à de nouvelles compétences et formes d’expression », a-t-elle ajouté. « Il est passionnant de réfléchir à ce que cela pourrait nous apporter et, en fin de compte, ce qui résonne le plus auprès du public nous montrera ce qui fonctionne le mieux. »

Adopter la diversité dans la K-pop

Du développement de la présence scénique du groupe à la fourniture de cours de langue des signes, Parastar Entertainment dit avoir essayé de ne rien négliger lors de la préparation des débuts de Big Ocean.

« L’un des défis anticipés était d’adapter nos méthodes de formation pour répondre aux besoins uniques de chaque membre », a déclaré Cha.

« Mais ce que nous n’avions pas vu venir, c’était la crise financière qui se déroulait derrière la scène des idoles. Malgré tout ce que nous avions prévu avec le budget préparé, les dépenses ont été plus importantes », a-t-elle ajouté.

La K-pop, phénomène mondial, a connu une croissance fulgurante au cours de la dernière décennie. Un rapport d’Allied Market Research a montré que le marché des événements K-pop à lui seul était évalué à 7,4 milliards d’euros en 2021 et devrait atteindre 18 milliards d’euros d’ici 2031.

En 2021, le label K-pop HYBE, société de gestion derrière le groupe BTS, a acquis la société de gestion du chanteur Justin Bieber, Ithaca Holdings.

Dans une industrie souvent critiquée pour ses normes rigides et son manque de diversité, Big Ocean tente d’atteindre un public mondial.

Le groupe compte désormais un total de 1,1 million d’abonnés sur trois plateformes de médias sociaux différentes, selon sa société de gestion.

« Pour être honnête, plus les gens sont ouverts à la diversité et à l’inclusion, plus les réactions à Big Ocean sont positives », a déclaré Cha. « Par exemple, aux États-Unis ou dans les pays européens où la perception sociale du handicap est très bonne, les gens ont tendance à être plus passionnés par Big Ocean. Il s’agit donc d’un marché encore meilleur que le marché coréen. Nous voulions atteindre cette zone où nous pourrions être mieux accueillis. »

Big Ocean affirme qu’ils intègrent toujours la langue des signes dans leurs performances pour permettre à tout le monde d’apprécier la musique plus facilement. Le groupe a sorti son premier single « Glow » interprété en langue des signes coréenne et son deuxième « Blow » en langue des signes américaine.

« Les membres eux-mêmes ont vécu tellement de moments difficiles et de difficultés diverses que nos chansons et nos paroles contenant ces idées sont plus accessibles à de nombreuses personnes », a déclaré Cha.

Big Ocean dit qu’ils espèrent pouvoir être acceptés comme une idole régulière de K-pop un jour.

« Je veux être reconnue non seulement pour nos capacités uniques, mais aussi pour notre talent et notre travail acharné, comme n’importe quelle autre idole. Et en y parvenant, je pense que nous pourrons naturellement briser les préjugés sociaux et créer de la bonne musique ensemble », a déclaré Hyunjin.

« Mon plus grand rêve serait de me produire devant nos fans avec ma propre voix. Les membres et moi nous consacrons actuellement à beaucoup d’entraînement vocal, et nous espérons montrer à tout le monde nos progrès et nos améliorations », a déclaré Jiseok.

Big Ocean s’apprête à sortir un nouvel album à l’occasion des Jeux paralympiques de 2024.

Pour en savoir plus sur cette histoire, regardez la vidéo dans le lecteur multimédia ci-dessus.

Laisser un commentaire

deux × 5 =