Transmisiones BILIA 2022

Conferencias y clases abiertas a la comunidad, en el marco de la primera bienal latinoamericana de inteligencia artificial y arte.

CURADURÍA ALGORÍTMICA, por Juaniko Moreno

POESÍA ALGORÍTMICA, por Martín Rangel

ALGORITMOS, MÁQUINAS Y ARTE, por Helio santos

VQGANxCLIP Ponencia por Sebastián Rojas, Constanza Lobos / HypereikonLab

NFTS & A.I, por Fabiola Larios

ESPECULACIÓN CREATIVA Y FICCIONES DE FUTURO, por AI Seeds

SENSIBILIDAD ARTIFICIAL, por Ricardo Castellani

HACIA UNA MIRADA MAQUINAL, por Omar Jaimes Rew

Hackatón Audiostellar – BILIA 2022

Invitados por wip arte digital y con el apoyo de la UNTREF (Universidad Nacional de Tres de Febrero – Buenos Aires, Argentina)

AudioStellar es un software libre de experimentación sonora desarrollado por Leandro Garber, Tomás Ciccola y Juan Cruz Amusategui en el marco de un proyecto de investigación radicado en MUNTREF Centro de Arte y Ciencia (Universidad Nacional de Tres de Febrero, Argentina).

El objetivo de la hackaton fué propiciar un espacio de encuentro y colaboraciones creativas entre artistas sonoros y electrónicos, programadores, músicxs, livecoders, performers, personas con proyectos o ideas vinculadas al desarrollo sonoro o audiovisual, colectivos artísticos y practicantes creativos en general.

Coordinación: Leandro Garber (AR) y Tomás Ciccola (AR)

Agradecimientos especiales: UNTREF – Universidad Nacional de Tres de Febrero – Buenos Aires, Argentina

Acerca de audiostellar:

El programa, por medio de un algoritmo de machine learning no supervisado, procesa un dataset de muestras sonoras para generar un mapa en dos dimensiones. Dicho espacio puede luego ser recorrido de maneras novedosas, proponiendo nuevas técnicas de diseño sonoro: trayectorias libres, emisión de agentes autónomos, constelaciones rítmicas o heurísticas personalizadas haciendo uso de controladores MIDI y OSC.   

El software puede bajarse libremente de su sitio en sus versiones para Linux, Mac y Windows. Puede ser usado con los archivos de audio precargados al igual que incorporando un dataset propio.

https://audiostellar.xyz/

Una parte de la presentación fué transmitida vía el canal de Youtube de BILIA:

Inteligencia Artificial como herramienta para la Producción Musical por Mathias Gatti

Taller práctico on line
formato intensivo, fechas: 17, 19, 24 y 26 de noviembre 19 a 21 hs
*No se requieren conocimientos previos

Valor del taller: $3800 / USD 60

*Cupos limitados

WIP arte digital surge en 2018 como un proyecto de gestión cultural independiente para la difusión de las artes digitales y electrónicas, un espacio para la formación por fuera de los circuitos académicos, atendiendo a las dinámicas propias del surgimiento de la escena local, como la autogestión, el auto didactismo y el sentido de comunidad. Sus talleres buscan incentivar la investigación sobre los nuevos usos de recursos tecnológicos y una actitud reflexiva acerca de las lógicas de pensamiento en proceso permanente que atraviesan a las prácticas de producción artística en el actual contexto socio cultural.

¿Por qué inteligencia artificial aplicada al arte?

De forma similar a cuando unx quiere explicarle a otra persona qué es el arte, al intentar desarrollar máquinas que producen algún tipo de arte unx se enfrenta a la difícil tarea de describir en términos simples (en este caso comandos básicos de computadora) ideas propias sobre lo que es el fenómeno artístico y como se desarrolla. Luego, de igual forma que un alumno toma ideas de su profesor, la IA seguirá nuestras enseñanzas para construir una obra original (entendida ésta como el establecimiento de nuevos vínculos). Una mezcla entre nuestra intuición del fenómeno artístico y la tenacidad de nuestra computadora para trabajar de forma continua por horas nos brinda no solo una gran forma de generar arte en colaboración con las máquinas sino que también una forma de entender mejor lo que es el arte para nosotrxs mismos.

Objetivos

  • Obtener conocimientos teóricos y prácticos sobre la inteligencia artificial y las arquitecturas de redes neuronales como potenciales motores de creación.
  • Introducirse en el manejo de herramientas y plataformas de machine learning como Python y Google Colab.
  • Analizar obras y modelos de inteligencia artificial aplicados a la producción musical y literaria.
  • Brindar herramientas que permitan mantenerse actualizados e incorporar herramientas futuras.
  • Realizar, en cada clase, actividades prácticas que permitan obtener experiencia directa con estas tecnologías y permitan que lxs participantes puedan producir una pieza propia.

Destinatarixs
Cualquier persona con interés en la intersección entre el arte y la inteligencia artificial. Productores muscales, músicxs, programadores, diseñadores, estudiantes, autodidactas, escritores, investigadores y artistas en general. No se requiere contar con conocimientos previos, aunque cualquier vinculación previa con música será de gran relevancia.

Requerimientos
No se requiere contar con conocimientos previos. Trabajaremos con Python, Colab, Audacity y Bandlab, junto con herramientas on line específicas de Machine Learning.

Contenidos por clase:

Clase 1: Intro y composición

  • Intro python, música y machine learning
  • Generación de letras y melodías
    • lyrics.mathigatti.com
    • GPT-2
  • Generación de composiciones
    • Treblemaker
    • Aiva
    • Magenta
    • OpenAI Jukebox

Clase 2: Sampling & MIR (Music Information Retrieval)

  • Identificación de beats y secciones: wav2loops
  • Spleeter: Separación de fuentes de audio
  • Transcripción automática: wav2midi
  • Partición de grabaciones por silencio: pydub

Clase 3: Síntesis

  • Síntesis de audio
    • Síntesis basada en samples: NSynth / BearBass
    • GanSynth
  • Síntesis de voz
  • Síntesis de canto

Clase 4: Video musical y Performance

  • Video musical
    • Generación automática de videoclips
      • wav2lips
      • GANs
    • Efectos de video
      • Style transfer
  • Performance
    • FoxDot
    • Música con gestos
  • Extras
    • plugins para DAWs
    • Reducción de ruido y mejoramiento de la calidad de audio/grabación
    • Audio 3D

¿Por qué inteligencia artificial aplicada al arte?

De forma similar a cuando unx quiere explicarle a otra persona qué es el arte, al intentar desarrollar máquinas que producen algún tipo de arte unx se enfrenta a la difícil tarea de describir en términos simples (en este caso comandos básicos de computadora) ideas propias sobre lo que es el fenómeno artístico y como se desarrolla. Luego, de igual forma que un alumno toma ideas de su profesor, la IA seguirá nuestras enseñanzas para construir una obra original. Una mezcla entre nuestra intuición del fenómeno artístico y la tenacidad de nuestra computadora para trabajar de forma continua por horas nos brinda no solo una gran forma de generar arte en colaboración con las máquinas sino que también una forma de entender mejor lo que es el arte para nosotrxs mismos.

En el marco de la plataforma WIP arte digital la propuesta de los encuentros será abordar de manera teórica y práctica las distintas herramientas surgidas en los últimos años de la mano de la inteligencia artificial (AI), con el objetivo de ampliar y complementar recursos para la experimentación con audio y texto, utilizando el software como colaborador creativo. En cada clase se verá un modelo de AI distinto, se experimentará con la utilización de los mismos y se presentarán piezas de referencia, evaluando y analizando las diversas posibilidades de aplicación en la producción creativa. Al finalizar el taller los integrantes serán capaces de integrar en su propio flujo de trabajo recursos para síntesis de voz y audio, generación de texto y composiciones musicales simples a través del aprendizaje automático. Se les brindarán herramientas generales para poder mantenerse actualizados a medida que surjan nuevos avances.

Objetivos

  • Obtener conocimientos teoricos y practicos sobre la inteligencia artificial y las arquitecturas de redes neuronales como potenciales motores de creación.
  • Introducirse en el manejo de herramientas y plataformas de machine learning como Python y Google Colab.
  • Analizar obras y modelos de inteligencia artificial aplicados a la producción musical y literaria.
  • Brindar herramientas que permitan mantenerse actualizados e incorporar herramientas futuras.
  • Realizar, en cada clase, actividades prácticas que permitan obtener experiencia directa con estas tecnologías.

Destinatarixs
Cualquier persona con interés en la intersección entre el arte y la inteligencia artificial. Programadores, diseñadores, estudiantes, autodidactas, escritores, musicxs y productores, periodistas, investigadores y artistas en general.

Requerimientos
No se requiere contar con conocimientos previos ni un software específico, se trabajará con herramientas online para la producción.

Contenidos por clase

Clase 1: Introducción

  • Introducción al aprendizaje automático en la producción artística
    • Introducción a las redes neuronales
    • Historia
  • Distintas arquitecturas y sus casos de uso
  • Introducción a las herramientas del curso
    • Python (Y sus librerías de machine learning y análisis de datos)
    • Google Colab

Clase 2: Generación de Texto

  • Generación de texto con GPT-2

Clase 3: Generación de texto avanzada y composición musical

  • Composición musical con GPT-2
  • Otros modelos interesantes
    • Generador de fake news (CTRL)
    • Jukebox

Clase 4: Sintesis de voz con redes neuronales (dc_tts)

  • Cómo preparar el conjunto de datos para clonar una voz
  • Cómo entrenar un modelo para clonar una voz

Clase 5: Codificación y síntesis de audio

  • Spleeter: Separación de fuentes de audio
  • Transcripción de audio a partitura automático
  • GANSynth: Síntesis de audio

Clase 6: Modelos para contenido multimedia

  • Modelos de síntesis de canto (Mellotron, Sinsy y vocaloid)
  • Síntesis y edición de imágenes
  • Síntesis y composición de video
  • Cierre: Intercambio de ideas y proyectos creativos

Sobre Mathias Gatti

Data scientist y creative coder, egresado de Ciencias de la Computación en Exactas-UBA. Trabaja de forma freelance analizando datos y desarrollando modelos de machine learning. Desde el año 2018 participa en CLiC el colectivo de live coding de Buenos Aires, donde realiza performances que consisten en la generación de música en vivo a través de la programación. Desde el 2019 participa en el grupo artístico bu3nAmigue donde trabaja en obras que involucran voces sintéticas, música generativa y poesía artificial.

@mathigatti / mathigatti.com

  • Taller práctico de 6 encuentros virtuales / zoom
  • / inicio grupo 1: jueves 17-sep, 19 a 21 hs //
  • / inicio grupo 2: sábado 19-sep, 11 a 13 hs //
  • (-3 UTC BUE)

Septiembre

Desarrollo de piezas de difusión a cargo de la artista Pao.Olea

Paola [Santiago, Chile]
Artista digital que utiliza el código creativo para investigar el movimiento y la forma. Formas simples y movimientos en permanente progresión invitan a la contemplación y a estados imaginativos que trasciendan las lógicas aparentes de lo visible, conectando con una narrativa cósmica y universal.
El proceso de creación nace a partir de una idea que puede surgir en cualquier momento y frente a cualquier estímulo. Estas ideas son llevadas a diferentes direcciones explorando distintos caminos en la programación nodal a través de Touchdesigner como prinicpal interfaz para sus trabajos.

Programación/ talleres:

Arte en colaboración con máquinas: inteligencia artificial aplicada a la generación de texto y audio

Taller por Mathi Gatti

Una mezcla entre nuestra intuición del fenómeno artístico y la tenacidad de nuestra computadora para trabajar de forma continua por horas nos brinda no solo una gran forma de generar arte en colaboración con las máquinas sino que también una forma de entender mejor lo que es el arte para nosotrxs mismos.

Taller práctico de 6 encuentros virtuales // inicio grupo 1: jueves 17-sep, 19 a 21 hs // grupo 2: sábado 19-sep, 11 a 13 hs (-3 UTC BUE)

Desarrollo del Dispositivo Escénico

Taller por Sebastián Alíes

Planteado como un espacio y tiempo para el análisis y la reflexión, los encuentros indagarán sobre conceptos que atraviesan a diferentes proyectos vinculados a la puesta en escena dentro del contexto de las manifestaciones contemporáneas relacionados con video, iluminación y sonido en relación al espacio.

Taller teórico-práctico de 5 encuentros virtuales // inicio martes 15-sep, 19 a 22 hs (-3 UTC BUE)