Brain2Music, l’IA qui génère de la musique depuis avec vos pensées ?

Dans une étude intitulée « Brain2music : recréation musicale à partir de l'activité cérébrale humaine », des chercheurs de l'université d'Osaka au Japon et du National Institute of Information and Communications Technology, en collaboration avec Google et Araya, ont exposé les résultats de leur travail sur l'Intelligence Artificielle en lien avec l'activité cérébrale humaine. Ils ont mis en place je cite, « une méthode de reconstitution musicale à partir de l'activité cérébrale capturée grâce aux images par résonance magnétique». Concrètement, les scientifiques ont exploité MusicLM, une IA capable de créer de la musique à partir de descriptions textuelles élaborées par Google. Mais contrairement à la création musicale basée sur le texte, l'IA de Brain2Music interprète les données d'activité cérébrale.Dans le détail, pour former les réseaux neuronaux à la base de Brain2Music, l'équipe de chercheurs a soumis cinq individus à des échantillons musicaux de 15 secondes dans des genres variés tels que le rock, le reggae, le jazz ou le métal. Les vidéos issues de l'imagerie par résonance magnétique ont ensuite permis à l'IA d'établir des liens entre les motifs musicaux et les zones cérébrales activées en fonction des différentes caractéristiques de la musique entendue (comme le rythme, l'ambiance, la dynamique, par exemple). Une fois ces données analysées et traduites en termes compréhensibles, il a suffi de les fournir à MusicLM pour qu'il « recrée » le morceau d'origine. Selon le groupe de chercheurs, les résultats de l'expérimentation sont très positifs : « la musique générée présente des similitudes avec les éléments musicaux que les sujets humains ont expérimentés ». Néanmoins, les compositeurs aspirant à créer de la musique « par la pensée » devront faire preuve de patience. Même si l'IA a accompli une prouesse notable, les morceaux reconstitués ne sont pas encore fidèles à la source. Hébergé par Acast. Visitez acast.com/privacy pour plus d'informations.