Nvidia ha presentado su nueva herramienta de audio generativo llamada Fugatto. Este innovador software promete crear y mezclar audio de diversas maneras, aunque aún no está disponible para el público. Fugatto, que significa “Transformador de Audio Generativo Fundamental Opus 1”, es descrito como la “máquina de sonido más flexible del mundo”. Puede producir música, discursos y sonidos únicos que nunca se han escuchado antes.
La herramienta funciona con indicaciones de texto y muestras de audio. Simplemente puedes describir lo que deseas escuchar o pedirle a la inteligencia artificial que modifique o combine clips de audio existentes. Por ejemplo, puedes transformar el sonido de un tren en una rica orquesta o mezclar una melodía de banjo con el sonido de la lluvia. También puedes hacer que un saxofón “ladré” o que una flauta “maulle”, solo escribiendo una indicación.
Fugatto tiene la capacidad de aislar voces de pistas y cambiar el estilo de entrega vocal, así como generar discursos desde cero. Si le proporcionas una melodía existente, puede reproducirla en cualquier instrumento y en el estilo que prefieras.
Sin embargo, la mala noticia es que aún no está disponible para probar. Por ahora, solo puedes ver un video promocional de Nvidia y una página con muestras de audio. No se ha anunciado cuándo estará disponible para pruebas públicas. Algunas de las muestras incluyen sonidos como una voz femenina ladrando, una máquina de fábrica gritando, una máquina de escribir susurrando y un violonchelo “gritando” con ira.
Nvidia también ha mostrado cómo su motor de inteligencia artificial puede producir clips de palabras habladas, que pueden ser entregados con diferentes emociones (desde enojo hasta felicidad) y acentos variados. Rafael Valle, miembro del equipo de Fugatto, comentó: “Queríamos crear un modelo que entienda y genere sonido como lo hacen los humanos. Fugatto es nuestro primer paso hacia un futuro donde el aprendizaje multitarea no supervisado en síntesis y transformación de audio emerja de la escala de datos y modelos”.