Yamaha presenta su proyecto “Dear Glenn” en el festival Ars Electrónica.
Yamaha presentará el próximo 7 de septiembre el primer sistema de Inteligencia Artificial (IA) para piano, basado en tecnología “Deep learning”2, capaz de tocar cualquier pieza musical al estilo del legendario Glenn Gould mientras interacciona con una agrupación de músicos en directo. El evento tendrá lugar el próximo 7 de septiembre durante el tercer día del Ars Electronica Festival, en Linz, Austria, uno de los mayores festivales de arte y tecnología del mundo. El sistema de IA dará un concierto junto con otros célebres pianistas actuales. Habrá también una mesa redonda sobre el futuro de la música e IA. El proyecto, además, forma parte de la conmemoración de los 150 años de Relaciones Diplomáticas entre Austria y Japón.
Puntos Clave:
- Yamaha presenta el primer sistema de Inteligencia Artifical (IA) del mundo capaz de tocar cualquier pieza musical al estilo del legendario pianista Glenn Gould a través de una experiencia interactiva entre el pianista de IA y músicos en directo.
- El concierto contará con la colaboración de renombrados intérpretes de la actualidad e incluirá piezas que Gould nunca llegó a tocar.
- Este evento explorará las posibilidades de co-creación para la interpretación musical entre la inteligencia artificial y humana.
Web oficial de “Dear Glenn”:
La website y el making-off del video estará disponible a partir del 4 de septiembre.
Con el apoyo incondicional de la Fundación Glenn Gould, Yamaha ha analizado más de 100 horas de grabaciones de Gould para desarrollar una completa comprensión de su estilo de interpretación. Con los datos obtenidos ha creado algoritmos de “Deep lerning” para la construcción del sistema de inteligencia artifical (IA). Además de las grabaciones de audio de Gould, los datos de aprendizaje de la IA incluyen interpretaciones de múltiples pianistas admiradores de Gould e íntimamente familiarizados con su estilo de interpretación, elevando la calidad de la recreación a una dimensión superior.
El sistema también incluye la tecnología original de Yamaha AI Music Ensemble, que permite analizar el rendimiento de otros músicos en directo de forma casi instantánea y tocar de forma predictiva en función de la interacción con éstos. Más que una simple interpretación automatizada, el sistema reproduce el toque magistral de Glenn Gould para proporcionar una experiencia inspiradora e interactiva de co-creación entre un pianista de IA y músicos en directo.
El sistema de IA será presentado el tercer día del festival, el sábado 7 de septiembre, durante una mesa redonda que explorarán el futuro de la música a través del uso de la IA para la interpretación. El debate posterior contará con el renombrado pianista contemporáneo Francesco Tristano; Brian M. Levine de la Fundación Glenn Gould y Akira Maezawa, desarrollador de Yamaha que ayudó a crear el sistema de IA.
Posteriormente, el sistema IA ofrecerá su primer concierto público junto con renombrados artistas contemporáneos en el monasterio St. Florian. Las actuaciones incluirán un dúo de piano con Francesco Tristano y un trío de viento con miembros de la Bruckner Orchestra de Linz. El programa incluirá la obra maestra de Glenn Gould: Goldberg Variations (BWV 988) de J.S. Bach; pero también la Fuga inversa a 2 Clavicembali de Bach de El Arte de la Fugue (BWV 1080/18) y la Trío Sonata en Sol Mayor (BWV 1038), ninguna de las cuales fue interpretada por Gould y por tanto no están incluidas en los datos de aprendizaje de la IA. Es decir, el sistema se enfrentará al reto de funcionar sin necesidad de imitar los datos de audio de la fuente.
Glenn Gould también era conocido por su devoción hacia la grabación con medios digitales y por su interés en repensar la relación entre el intérprete y el público. El nombre del proyecto "Dear Glenn" es un homenaje a la actitud del artista, que ayudó a desarrollar las posibilidades de las nuevas tecnologías y es por tanto la inspiración para la idea que se esconde detrás de este proyecto; con el que Yamaha quiere mostrar nuevas posibilidades de expresión musical a través de la co-creación y la inspiración mutua entre músicos y la moderna tecnología de IA.
Comentario de Koichi Morita, Director General de la División de Investigación y Desarrollo de Yamaha
En el mundo de los instrumentos y la música, que han sido favorecidos por la Historia y la tradición, el avance técnico siempre ha actualizado y ampliado las posibilidades de la expresión musical. Un ejemplo importante es el piano, que sigue evolucionando incluso después de haberse convertido en un instrumento ampliamente aceptado en su forma actual gracias a la revolución industrial. La evolución de la tecnología de la información en el siglo XX nos ha proporcionado no sólo una revolución en el hardware del piano, sino también en el software, incluyendo la tecnología de IA. Yamaha confía en que la IA tiene el potencial de expandir los límites de la creatividad musical desde el punto de vista de la emoción y la sensibilidad humanas. Esperamos explorar nuevas posibilidades exponiendo y compartiendo algunos de nuestros resultados con los entusiastas de la música en Ars Electronica este septiembre.
Descripción general de la tecnología
El sistema de IA es capaz de tocar el piano al estilo de Glenn Gould y se distingue por su capacidad de tocar piezas que el artista nunca ha interpretado, siempre y cuando se disponga de la notación de la obra. Esta hazaña es posible gracias a la utilización por primera vez para la interpretación musical de la tecnología “Deep learning”. El sistema consta de un piano y el software de IA que genera instantáneamente los datos de reproducción al estilo de Glenn Gould y los manda al reproductor del piano.
Figura 1: Step 1: Proceso de aprendizaje de IA. [Grabaciones de Glenn Gould + Datos de notación de la partitura correspondiente a la grabación= Análisis de la interpretación de Glenn Gould] Step 2: Además de analizar la forma de tocar de Glenn Gould basándose en las grabaciones de sus interpretaciones Artificial la IA utiliza datos de interpretaciones de otros pianistas que estaban íntimamente familiarizados con el estilo de Gould para aprender de una red neuronal profunda capaz de tocar cualquier partitura al estilo de Glenn Gould [Análisis de la interpretación de Glenn Gould + Datos de la interpretación de otros artistas familiarizados con el estilo de Gould= Creación de un completo y complejo Sistema de Inteligencia Artificial] Step 3: Como resultado, IA es capaz de reproducir el estilo de Gould incluso para la interpretación de piezas que nunca fueron grabadas por el artista [Sistema de Inteligencia Artificial + Cualquier partitura = Posibilidad de interpretar cualquier pieza musical]
Figura 2: Funcionamiento de Glenn Gould IA en una agrupación musical. El análisis a tiempo real y en directo de los músicos participantes a través de una cámara y un micrófono permite a Glen Gould IA interactuar con ellos durante la interpretación.
Mesa redonda (Presentación IA)
Fecha:
Sábado 7 septiembre, 2019 19-19:30h
Lugar:
Monasterio St. Florian (Linz, Australia)
Participantes:
Francesco Tristano (pianista), Brian M. Levine (Fundación Glenn Gould), Norbert Trawoger (Brucker Orchestra, Linz), Akira Maezawa (desarrollador de Yamaha)
Tema:
Posibilidades de co-creación entre artistas e inteligencia artificial
Concierto
Fecha:
Sábado 7 Septiembre 2019 20:30-21h
Lugar:
Monasterio St. Florian (Linz, Austria)
Músicos colaboradores:
Francesco Tristano (pianista), Norberto Trawoger (Flauta, Orquesta de Linz), María Elisabeth Kostler (Violín; Orquesta Bruckner, Linz)
Obras:
Variaciones Goldberg (BWV 988) de J. S. Bach; Fuga inversa a 2 Clavicémbalos del Arte de la Fuga (BWV 1080/18)*, Trio Sonata en Sol Mayor (BWV 1038)*
*Piezas que nunca han sido interpretadas por Glenn Gould
Glenn Gould
Nacido en Toronto (Canadá) en 1932, Glenn Gould fue un extraordinario pianista que ha recibido innumerables elogios y es mundialmente conocido por su magistral y personal interpretación de la música de J. S. Bach, comenzando con su álbum de debut: Las Variaciones Goldberg, que salió a la luz en 1956. En 1964, a la edad de 26 años, Gould anunció el final de su carrera como concertista y comenzó a centrarse exclusivamente en la grabación a través de medios digitales. Gould también era muy conocido por su forma de tocar, poco convencional y muy personal, que incluía el sentarse en una silla baja e inclinarse sobre el teclado del piano, así como tararear mientras tocaba, incluso durante las grabaciones. En sus últimos años, Gould grabó tres álbumes, incluyendo las Variaciones de Bach en un piano de concierto Yamaha. Falleció en 1982 a la temprana edad de 50 años.
Ars Electronica Festival
Se trata de un festival centrado en las últimas novedades en arte, tecnología y ciencia y está organizado por el instituto de investigación de arte multimedia Ars Electronica con sede en Linz, Austria. Su primera edición se celebró en 1979 y desde entonces el festival se ha convertido en uno de los eventos de arte y tecnología más grandes del mundo. Durante el mismo, expertos de todo el mundo se reúnen en exposiciones, espectáculos, eventos y conferencias internacionales a los alrededores de Linz para participar en debates y formar nuevas sinergias.
Fundación Glenn Gould
El objetivo de la Fundación Glenn Gould es honrar el espíritu y legado de Glenn Gould reconociendo su excelencia, promoviendo la creatividad y transformando vidas a través del poder de la música y las artes con actividades propias de la Fundación entre las que destaca el Premio Glenn Gould.
Noticias relacionadas:
・Yamaha AI Reproduces Touch of Master Pianist Sviatoslav Richter, Performs with Berlin Philharmonic Orchestra
・Yamaha Artificial Intelligence (AI) Transforms a Dancer into a Pianist
・Yamaha AI Joins Human Players in Piano Duet, Wind Ensemble
・Yamaha and HAKUHODO i-Studio Exhibit Experiential AI Music installation at SXSW
*1: A partir de una encuesta interna de Yamaha con fecha Agosto 2019
*2: “Deep learning” o aprendizaje profundo es un método de aprendizaje automático que se caracteriza por el uso de multicapa de modelos matemáticos llamados redes neuronales para el procesamiento de la información