Fuente: Instituto de Tecnología de Georgia
“Every Little Thing She Does Is Magic” de Imagine The Police comienza con “Beat It” de Michael Jackson y el riff de “Bodak Yellow” de Cardi B se mezcla con Jackson. Esta mezcla no es una fantasía imposible sino una realidad gracias a Mixboard, una aplicación para tabletas que permite a los usuarios sin experiencia musical o de edición crear las canciones de sus sueños.
La aplicación proviene del Centro de Tecnología Musical del Instituto de Tecnología de Georgia, cuyo director, el profesor Gil Weinberg, y sus estudiantes han estado desarrollando la herramienta de enlace durante años. Ahora, la tecnología finalmente se ha puesto al día con su visión original. Con la ayuda de la inteligencia artificial (IA), la aplicación adquiere artistas que el usuario no puede emparejar naturalmente y encuentra las mejores partes de la canción para combinar.
“Creo que cualquiera puede ser creativo con la música”, dijo Weinberg. “Tal vez no todos conocen toda la teoría que se requiere para componer una pieza musical a nivel de nota, pero a casi todas las personas les gusta la música. Si les damos una manera muy fácil de poner canciones en diferentes lugares, pueden crear algo único. ”
Los investigadores presentaron su trabajo en el documento “Mixboard – A co-creative mashup for newbies” en la Conferencia Internacional sobre Nuevas Interfaces para la Expresión Musical (ANI 2023) En Mayo.
Hacer mashups
Para crear un mashup, los usuarios arrastran y sueltan hasta cuatro canciones de su biblioteca de música de Spotify o Mixboard en segmentos de voces, bajos, acordes y batería de hasta 32 compases. La experiencia es de naturaleza visual y permite a los usuarios seguir mientras la aplicación mezcla las pistas seleccionadas, renderizándolas en solo unos segundos. Una vez hecho esto, los usuarios pueden descargar y compartir su pista única.
“He estado trabajando en casi todas las partes del proyecto, desde la interfaz web y el back-end hasta la creación de una nueva aplicación para iOS”, dijo el Dr. Raghavasimhan Sankaranarayanan. estudiante de tecnología musical. “Me apasiona construir cosas sólidas y listas para la producción”.
DJ con IA
La inteligencia artificial permite a los usuarios concentrarse en crear una canción, en lugar de preocuparse por los aspectos técnicos y la teoría musical. La aplicación utiliza bibliotecas de búsqueda de información musical de código abierto para determinar los tempos, las claves y los temas musicales de las canciones, lo que ayuda a dividir la canción en mezclas individuales. El algoritmo puede estirar el audio para que coincida con el tempo o transponer las claves para asegurarse de que ambas canciones estén en la misma clave. Los investigadores también proporcionan plantillas para estructuras de canciones básicas para ayudar a los usuarios a crear una canción atractiva.
“Cuanto más nos enfocamos en el avance de la IA con fines creativos, más puede ser inspiradora y percibida como una contribución única que los humanos no pueden brindar”, dijo Weinberg. “Junto con su propia creatividad y el aporte creativo de la IA, la combinación puede ser algo único y nuevo que no habría creado solo”.
Mezclar comentarios de los usuarios
Para garantizar que Mixboard funcione, los investigadores realizaron encuestas de usuarios dirigidas por el estudiante de maestría en interacción humano-computadora, Tommy Ottolin. Su investigación evaluó la interfaz web con 45 personas de 18 a 27 años, excluyendo a personas con más de un año de experiencia mezclando música o componiendo. Los participantes tenían 30 minutos para probar Mixboard. Luego realizaron una entrevista semiestructurada con los investigadores, luego completaron una encuesta de 20 preguntas utilizando una escala de Likert de cinco puntos, preguntando sobre cosas como mucho control creativo según los usuarios o facilidad de uso de la aplicación.
“Ver a la gente interactuar con nuestro Mixboard evoca una variedad de emociones en mí, incluido el orgullo, el nerviosismo y la emoción”, dijo Qinying Lei, estudiante de posgrado en tecnología musical. “Me alegra que los usuarios estén encantados con Mixboard y sorprendidos por la música única que producen”.
El futuro de la mesa de mezclas
Si bien los investigadores continúan refinando la automatización de aplicaciones y mejorando la funcionalidad de iOS, también ven mucho más potencial que un simple experimento de laboratorio. Esperan comercializar la aplicación, pero están menos limitados por la tecnología y más limitados por las licencias. Weinberg consultó con Kobi Abayomi, exvicepresidente sénior de Data Science en Warner Music Group, ahora director de Ciencias de Gumbel Demand Acceleration y miembro del consejo asesor de Ivan Allen College of Liberal Arts.
“Los titulares de derechos musicales deberían ver aplicaciones como Mixboard como oportunidades de marketing, no como licencias de juegos”, dijo. “Hacer que a la gente le guste más la música, específicamente tu tipo de música, es de lo que se trata el marketing musical con visión de futuro”.
En última instancia, sin embargo, Mixboard se trata de democratizar el acceso a la producción musical y demostrar que cualquiera puede ser creativo.
“Escuchar los mashups generados, que mejoraron cada vez más con cada modificación de nuestro algoritmo, fue increíble”, dijo Nitin Hugar, estudiante graduado en Tecnología Musical. “También fue divertido tratar de mezclar las canciones más inverosímiles: una canción india con ritmos africanos y algunos acordes de jazz definitivamente no era lo que pensé que sonaría bien juntos, pero me han demostrado que me equivoqué muchas veces. Este proyecto me hizo apreciar cómo la música de diferentes regiones del mundo está conectada entre sí”.