Introducción a la Síntesis Sonora con Redes Neuronales

Presentación

En este taller introductorio, haremos uso de herramientas que nos permiten trabajar con redes neuronales para la sintesis de sonido, utilizando la plataforma gratuita de Google Colab.

El objetivo del taller es que lxs participantes cimienten conceptos básicos acerca del funcionamiento de las redes neuronales orientadas a la síntesis de sonido y las incorporen dentro de sus metodologías y formas de trabajo para el diseño sonoro y composición musical. Haremos uso de algoritmos de ‘deep learning’ existentes y analizaremos las filosofías detrás de ellos, al mismo tiempo que se discutirán diferentes tipos de implementaciones que artistas hacen en sus trabajos.

Contenidos

Sesión 1

• – Introduccion a las redes neuronales y un breve repaso de su historia e implementaciones actuales.
• – Breve introduccion a Google Colab y comandos basicos de Python.

Sesion 2

• – Introduccion al algoritmo ‘SampleRNN’.
• – Que es una red neuronal recurrente?
• – Recoleccion de datos para redes neuronales como estrategia de representacion cultural.
• – Entrenamiento de redes neuronales, principios basicos.
• – Sintesis de sonido con SampleRNN.

Sesión 3

• – Introduccion al algoritmo MelSpecVAE
• – Breve introduccion a ‘Variational Auto-Encoders’
• – Ejercicio de entrenamiento de MelSpecVAE.
• – Sintesis de sonido con MelSpecVAE

Sesion 4

• – Introduccion al algoritmo MelGAN-VC
• – Que es una Red Generativa Adversaria (GAN)?
• – Que es ‘transferencia de estilo’?
• – Ejercicio de entrenamiento utilizando MelGAN-VC
• – Sintesis de sonido con MelGAN-VC.
• – Discusion abierta: consideraciones eticas sobre la recoleccion de datos, produccion cultural como trabajo y asimetrias de poder en el desarrollo de herramientas de ‘deep learning’.