El proyecto de Yamaha Dear Glenn, presenta un sistema de IA que reproduce el estilo de interpretación del legendario pianista Glenn Gould en el Festival Ars Electrónica
Yamaha Corporación presentará el primer*1 sistema de piano con Inteligencia Artificial (IA) en el mundo basado en tecnología de aprendizaje profundo*2 capaz de tocar cualquier pieza de música al estilo del legendario difunto pianista Glenn Gould, mientras intectúa con seres humanos en un conjunto musical. En el tercer día en el Festival Ars Electrónica, el 7 de septiembre, uno de los más grandes festivales de artes de medios del mundo,en celebrarse en Linz, Austria. ofrecerá un concierto junto con varios artistas de renombre actualmente para conocer el sistema de IA. También habrá una sesión de panel sobre el futuro de la música y la IA. El proyecto ha sido reconocido como uno de varios esfuerzos para celebrar 150 años de relaciones entre Japón y Austria.
Aspectos importantes
- Yamaha presentará el primer sistema de IA del mundo capaz de tocar cualquier pieza musical al estilo del legendario pianista Glenn Gould con experiencia interactiva entre un pianista de IA y músicos humanos
- La IA está lista para tocar en concierto junto con artistas de renombre actualmente, incluidas piezas nunca interpretadas por Gould
- El debate explorará las posibilidades de co-creación entre la IA y los humanos y cómo la interpretación musical
Sitio web oficial del querido Glenn:
Sitio web y video de preparación para el 4 de septiembre.
Con el pleno apoyo de la Fundación Glenn Gould, Yamaha analizó más de 100 horas de grabaciones de actuaciones de Gould para desarrollar una comprensión de su estilo y su forma de tocar y empleó algoritmos de aprendizaje profundo basados en los datos recopilados para crear el sistema de inteligencia artificial. Además de las grabaciones de audio de Gould, los datos de aprendizaje de IA incluyen información humana generada de actuaciones de múltiples pianistas que eran admiradores de Gould y estaban íntimamente familiarizados con su estilo de interpretación, elevando la calidad de la reproducción a nuevos niveles.
El sistema también incluye la tecnología AI Music Ensemble original de Yamaha que permite analizar la interpretación de otros músicos casi al instante y tocar de forma predictiva mientras interactúa con otros músicos reales. Más que una simple actuación automatizada, el sistema reproduce el toque magistral de Glenn Gould con el fin brindar una experiencia inspiradora e interactiva de co-creación entre un pianista de IA y músicos humanos.
El sistema de inteligencia artificial se presentará el tercer día del festival, el sábado 7 de septiembre, durante una sesión de panel que explorará el futuro de la música a través del uso de inteligencia artificial en la interpretación musical. El debate incluirá al reconocido pianista contemporáneo Francesco Tristano, Brian M. Levine de la Fundación Glenn Gould y el desarrollador de Yamaha Corporation, Akira Maezawa, que ayudó a crear el sistema de inteligencia artificial.
Posteriormente, el sistema de IA ofrecerá su primer concierto público junto con reconocidos artistas contemporáneos en el monasterio de St. Florian. Las presentaciones incluirán un dúo de piano con Francesco Tristano y un trío de viento con miembros de la Bruckner Orchestra Linz. El programa incluirá la obra maestra representativa de Glenn Gould, Goldberg Variations (BWV 988) de J.S. Bach, así como la Fuga inversa a 2 Clavicembali de Bach de The Art of the Fugue (BWV 1080/18) y Trio Sonata en Sol mayor (BWV 1038), ninguno de los cuales fue interpretado por Gould. Como ninguna de las piezas está incluida en los datos de aprendizaje de la IA, el sistema afrontará el desafío de interpretar sin la capacidad de imitar datos de audio originales.
Glenn Gould fue también conocido por su dedicación a la grabación con medios digitales y su interés en repensar la relación entre el artista y la audiencia. El nombre del proyecto «Dear Glenn» es un homenaje a la actitud del artista, que ayudó a revelar las posibilidades de las nuevas tecnologías y también fue la inspiración para la idea detrás del proyecto. A través de este proyecto, Yamaha espera presentar nuevas posibilidades en la expresión musical a través de la creación conjunta y la inspiración mutua entre músicos humanos y la tecnología moderna de IA.
Comentario de Koichi Morita, Gerente General Senior de la División de Investigación y Desarrollo, Yamaha Corporation
En el mundo de los instrumentos y la música, que han sido fomentados por la historia y la tradición, el avance técnico siempre ha actualizado y ampliado las posibilidades de expresión musical. Un ejemplo importante es el piano, que continúa evolucionando incluso después de convertirse en un instrumento que ha trascendido fronteras en su forma actual gracias a la revolución industrial. La evolución de la tecnología de la información del siglo XX nos ha proporcionado no solo una revolución de hardware del piano, sino también una revolución de software, incluida la tecnología de inteligencia artificial. Yamaha cree que la IA tiene el potencial de expandir los límites de la creatividad musical desde el punto de vista de la emoción y la sensibilidad humana. Esperamos explorar nuevas posibilidades exhibiendo y compartiendo algunos de nuestros resultados continuos con entusiastas de la música en Ars Electrónica este septiembre.
Descripción general de la tecnología
El sistema de inteligencia artificial es capaz de tocar el piano al estilo de Glenn Gould, y se distingue por su capacidad de tocar también, al instante, piezas nunca antes interpretadas por el artista, siempre que haya datos de partituras disponibles. Esta hazaña es posible gracias al uso de la primera aplicación a nivel mundial de tecnología de aprendizaje profundo. El sistema consiste en un reproductor de piano y el software de IA que genera instantáneamente datos de reproducción al estilo de Glenn Gould y luego proporciona esos datos al reproductor de piano.
Imagen 1: El proceso de aprendizaje de IA. Además de analizar el toque de Glenn Gould, en el piano basado en grabaciones de audio de sus interpretaciones (Paso 1), la IA también utilizó datos de interpretación de otros pianistas que estaban íntimamente familiarizados con Gould para aprender de una red neuronal profunda capaz de interpretar el estilo de Glenn Gould con el uso opcional de partituras (Paso 2). Como resultado, la IA puede reproducir el estilo de Gould incluso mientras interpreta piezas nunca grabadas por el artista (Paso 3).
Imagen 2: Operación de la IA de Glenn Gould, en conjunto (ensamble). El análisis en tiempo real de artistas humanos a través de la cámara y el micrófono permite que la IA de Glenn Gould, interactúe con ellos mientras tocan.
Sesión de panel (presentación de AI)
Fecha:
7 de septiembre de 2019 (sáb.) de 19:00 a 19:30
Recinto:
Monasterio St. Florian (Linz, Austria)
Ponentes:
Francesco Tristano (pianista), Brian M. Levine (Fundación Glenn Gould), Norbert Trawoger (Brucker Orchester Linz), Akira Maezawa (I + D, Yamaha Corporation)
Tema:
Posibilidades de co-creación entre artistas y la IA
Concierto
Fecha:
7 de septiembre de 2019 (sábado) de 20:30 a 21:00
Recinto:
Monasterio St. Florian (Linz, Austria)
Co-intérpretes:
Francesco Tristano (pianista), Norbert Trawoger (Flauta; Brucker Orchester Linz), Maria Elisabeth Kostler (Violín; Bruckner Orchester Linz)
Piezas:
Variaciones de Goldberg de J.S. Bach (BWV 988), Fuga inversa a 2 Clavicembali de The Art of the Fugue (BWV 1080/18)*, Trio Sonata en Sol mayor (BWV 1038)* *Nunca antes interpretado por Glenn Gould
Glenn Gould
Nacido en Toronto, Canadá en 1932, Glenn Gould, fue un pianista legendario que falleció en 1982 a la temprana edad de 50 años. Gould, ha recibido elogios extraordinarios y es conocido por sus magistrales interpretaciones de la música de J.S. Bach, comenzando con su álbum debut Bach: The Goldberg Variations, que se lanzó en 1956. En 1964, Gould, anunció el final de su carrera como concertista y comenzó a concentrarse en grabar, dedicándose a los lanzamientos de medios digitales. Gould, también era conocido por sus hábitos de interpretación poco convencionales y únicos, que incluían sentarse en una silla baja e apoyarse sobre el teclado del piano, así como tararear mientras tocaba, incluso durante las grabaciones. En sus últimos años, Gould grabó tres álbumes, incluido Bach: The Goldberg Variations, en un piano de concierto Yamaha.
Festival Ars Electrónica
El Festival Ars Electronica es un festival que se centra en lo último en arte, tecnología y ciencia y está organizado por Ars Electronica, un instituto de investigación de arte de medios con sede en Linz, Austria. El primer festival se celebró en 1979, y se ha convertido desde entonces en uno de los eventos de arte de medios más grandes del mundo. Durante el festival, los expertos de todo el mundo se reúnen en exposiciones, espectáculos, eventos y conferencias internacionales en diferentes recintos de Linz para entablar debates y fomentar nuevas conexiones.
Fundación Glenn Gould
La misión de la Fundación Glenn Gould, es honrar el espíritu y el legado de Glenn Gould, celebrando su brillantez, promover la creatividad y transformar vidas a través del poder de la música y las artes con las actividades distintivas de la Fundación, incluido el Premio Glenn Gould.
Comunicados de prensa relacionados
・La IA de Yamaha reproduce el toque del maestro pianista Sviatoslav Richter, actúa con la Orquesta Filarmónica de Berlín
・ La Inteligencia Artificial (AI) de Yamaha transforma a un bailarín en un pianista
・ La IA de Yamaha se une a los artistas humanos de Piano Duet, Wind Ensemble
・ Yamaha y HAKUHODO i-Studio exhiben instalación de música IA experimental en SXSW
*1: A partir de agosto de 2019, encuesta interna de Yamaha Corporation.
*2: El aprendizaje profundo es un método de aprendizaje automático y se caracteriza por el uso múltiples capas de modelos matemáticos llamados redes neuronales para procesar información.