Tabla de contenido
Publicado en TLM
Ver: Proyecto Neumz
Obras ocultas durante más de 1.000 años
El departamento de Lenguajes y Sistemas informáticos desarrolla una herramienta basada en Inteligencia Artificial para realizar su transcripción.
Investigadores de la Universidad de Alicante están desarrollando una herramienta basada en Inteligencia Artificial (IA) de transcripción de partituras medievales y lo están haciendo dentro del proyecto europeo REPERTORIUM (Researching and Encouraging the Promulgation of European Repertory through Technologies Operating on Records Interrelated Utilising Machines), cuyo objetivo es preservar el patrimonio musical europeo y crear tecnologías de procesamiento de sonido de última generación, incluido audio inmersivo listo para el metaverso.
Jorge Calvo y David Rizo, profesores del departamento de Lenguajes y Sistemas Informáticos, dirigen el equipo de la UA responsable de la creación de un OMR (Reconocimiento Óptico de Música, en sus siglas en inglés) que devolverá a la vida a más de 4.000 piezas de canto gregoriano, que no han visto la luz durante más de 1.000 años. En total se va a trabajar con 400.000 imágenes de manuscritos antiguos.
El OMR permite extraer la información de los manuscritos digitalizados, tal como la melodía, letra, tipo de rito litúrgico o posición en el ciclo litúrgico. En el contexto de REPERTORIUM es un gran reto científico debido a que la IA no tiene sólo que entender los símbolos de la notación musical sino también reconocer el texto de las obras e interpretar de manera automática cómo debe ser cantado.
Una vez el ordenador es capaz de procesar imágenes de partituras y comprenderlas, se puede transcribir el contenido de las obras de manera eficiente y precisa a un formato de partitura digital, permitiendo después aplicar todo tipo de tecnologías digitales para llevar a cabo los objetivos del proyecto.
El proyecto comenzó su andadura el pasado mes de enero y se desarrollará durante tres años. REPERTORIUM está formado por un consorcio cuyos miembros provienen de ocho países y es coordinado por la Escuela Politécnica Superior de Linares de la Universidad de Jaén.
Entre los socios, además, se encuentran la Universidad de Oxford, el Instituto Complutense de Ciencias Musicales, la Asociación Hispana para el Estudio del Canto Gregoriano, la Universidad Politécnica de Milán, la Universidad de Tampere, la empresa de marketing creativo VIST.CO de Hamburgo, el desarrollador Spork Digital del Reino Unido, la Asociación Francesa Musicologie Médiévale, la Orquesta Filarmónica Nacional de Lituania y el desarrollador de tecnología cultural Odratek.
El departamento de Lenguaje y Sistemas Informáticos de la Universidad de Alicante cuenta con los mejores expertos en Reconocimiento Óptico de Música del mundo. “Somos los líderes mundiales en OMR”, segura el profesor Calvo, quien cuenta que uno de los retos de este proyecto es que al mismo tiempo se va aplicar OCR (Reconocimiento Óptico de Caracteres) de forma que se transcribirá el texto y las notas con el fin de establecer la relación entre ambos. Los cantos catalogados serán publicados en bibliotecas digitales para difundir este contenido, hasta ahora accesible tan solo a un reducido número de expertos.
Estas 400.000 imágenes provienen del archivo del Taller de Paleografía Musical de la Abadía de Solesmes (Francia). Una vez digitalizadas, se almacenarán en DIAMM, la plataforma abierta de la Universidad de Oxford, especializada en la catalogación de imágenes de manuscritos musicales antiguos.
Por otra parte, la información relativa a la catalogación (metadatos) se indexará en el portal de la Asociación Medieval Music Manuscripts Online (MMMO), accesible en abierto. Ambos sistemas estarán interconectados entre sí para evitar duplicidades, asegurar la consistencia y facilitar la labor de consulta.
Sobre los investigadores
Jorge Calvo
Ingeniero en Informática y Doctor por la Universidad de Alicante en 2011 y 2016, respectivamente. Beneficiario de una ayuda del programa de Formación de Profesorado Universitario (FPU) del Ministerio de Educación, Cultura y Deporte entre 2013 y 2017. Durante este periodo, realizó estancias predoctorales en Málaga, Nantes, Viena, Valencia y Montreal.
Trabajó como investigador postdoctoral en McGill University de Montreal, durante un año, y en la Universitat Politècnica de València, con un contrato Juan de la Cierva – Formación del Ministerio de Economía, Industria y Competitividad, durante 8 meses.
En noviembre de 2018 se incorpora a la Universidad de Alicante como Profesor Ayudante Doctor. En septiembre de 2022 promociona a Profesor Titular de Universidad.
Ha sido galardonado con el premio nacional «Premios de Investigación Sociedad Científica Informática de España (SCIE) – Fundación BBVA 2018» en la categoría «Jóvenes Investigadores Informáticos», con el «Accésit AERFAI a la mejor tesis doctoral 2015-2016» por la Asociación Española de Reconocimiento de Formas y Análisis de Imagen, así como con el «Premio extraordinario en Ingeniería en Informática» y «Premio extraordinario de doctorado» por la Universidad de Alicante.
David Rizo
David Rizo Valero es ingeniero y doctor en informática por la Universidad de Alicante.
Su primera etapa profesional la realiza como profesional autónomo durante 5 años en la academia de estudios universitarios Aula 12 y en la empresa de desarrollo software IACI Ingenieros S.L.
Tras ello se incorpora como Responsable del Portal Horizontal de Wanadoo España S.L. perteneciente al grupo France Telecom, donde permanece 4 años.
Desde el año 2004 hasta la actualidad es profesor de Medios Informáticos en la Escuela de Arte y Superior de Diseño de Alicante, inscrita en el Centro Superior de Enseñanzas Artísticas de la Comunidad Valenciana (ISEA.CV) y profesor asociado del Departamento de Lenguajes y Sistemas Informáticos de la la Universidad de Alicante desde el año 2002, donde adicionalmente realiza su labor investigadora en el grupo de Reconocimiento de Formas e Inteligencia Artificial en el área de la informática musical.
Sobre REPERTORIUM
Web | Medium | Facebook | Twitter | Instagram
Este proyecto sentará las bases tecnológicas sobre el proceso de catalogación de los archivos musicales utilizando, entre otras, técnicas de Inteligencia Artificial, que quedarán disponibles, en código abierto, para que se puedan aplicar a otros archivos históricos musicales.
Además, otra vertiente del proyecto se centrará en desarrollar tecnologías que permitan una completa experiencia inmersiva en conciertos de música clásica, de forma que el usuario pueda interactuar con la orquesta con fines lúdicos o educativos.
Esta tecnología, además, será accesible para las orquestas, de forma que el público pueda interactuar en conciertos inmersivos a través de plataformas tecnológicas y de realidad virtual, e impulsar así el desarrollo de nuevos mercados en streaming y la captación de nuevas audiencias.
REPERTORIUM dará a conocer las tecnologías desarrolladas en ciclos de conferencias y ferias, además de elaborar material educativo y una serie de publicaciones para su difusión. Asimismo, en su etapa final, el proyecto ofrecerá varios conciertos y una ópera para que el usuario pueda experimentar toda esta tecnología en la práctica. También se impartirán talleres en conservatorios y escuelas de música.
Más información
Web | Facebook | Twitter | Youtube | Instagram | Linkedin
Fuente – Universidad de Alicante
