La UPC porta la Intel·ligència Artificial a l’AI and Music S+T+ARTS Festival, organitzat amb Sónar i betevé, a Barcelona
Imatge del programa corresponent a la creació 'AAI LIve', de Mouse on Mars, el tàndem format pels artístes de música electrònica Jan St. Werner i Andi Toma
Conferències per explorar innovacions entre la IA i la música
L’AI and Music Festival oferirà un cicle de conferències i taules rodones organitzades per Sónar i la UPC a l’Auditori del CCCB, amb la participació de científics, artistes i professionals que debatran sobre els usos, experiments i potencial de la IA com a element transformador en la música i en com fer-la arribar al gran públic. Faran èmfasi, per exemple, en els nous instruments i maneres d'interpretar i crear o en com ensenyar a les màquines a escoltar, veure i sentir en clau humana.
En aquestes xerrades es donaran a conèixer aspectes de visió per computador, ús de les tecnologies de la veu, instruments i eines de processament d’àudio i producció musical. Algunes de les conferències són les següents:
- Musicians Learning Machine Learning, amb Rebecca Fiebrink, professora de computació creativa de la University of London; la compositora Shelly Knotts i Santiago Pascual, enginyer alumni de la UPC i investigador de Dolby.
- Teaching machines to feel like humans do, amb Antonio Torralbao, director de la Facultat d’Intel·ligència Artificial i presa de decisions del Institut Tecnològic de Massachusetts (MIT) i alumni de la UPC, i Luc Steel, professor i investigador de la Universitat Pompeu Fabra (UPF-CSIC).
- AI and future music genres, amb l’artista Libby Heaney, la compositora musical Nabihah Iqbal, Emilia Gómez, professora de la UPF, i el músic Jan St. Wener (Mouse on Mars).
- Make way for the new music instruments!, amb el productor musical Agoria, l’investigador de la Universitat d’Aalto Koray Tahiroğlu, el músic Rob Clouth i el científic de Google Douglas Eck.
Els representants de les diferents institucions que han presentat el Festival, el 21 d'octubre a Barcelona
L'actuació de Marco Mezquida per al concert inaugural s'ha concebut amb els investigadors de l’IDEAI Ivan Paz i Philippe Salembier, en col·laboració amb l’ESMUC
L'espectacle 'Engendered Otherness. A symbiotic AI dance ensemble’ aplica la IA al món del ball, en col·laboració amb el cantautor Stefano Rosso i els investigadors de l'IDEAI Martí de Castro i Javier Ruiz
Un moment de la intervenció del director del CITM, Carles Sora, i de Ferran Marqués, investigador de l'DEAI de la UPC, durant l'acte de presentació del festival
L'AI and Music S+T+ARTS Festival, que organitzen conjuntament Sónar, la UPC i betevé, els dies 27 i 28 d’octubre, en format híbrid, compta amb prop de 30 activitats que interelacionen música i Intel·ligència Artificial. Un esdeveniment que reunirà músics, científics i artistes de tot el món. Les entrades per assistir a les activitats, a la venda al web del Festival, tenen descompte per a l'estudiantat de la UPC (preu de l'entrada a 15 euros).
29/10/2021
L’AI and Music S+T+ARTS Festival ha programat 30 activitats en el Centre de Cultura Contemporània de Barcelona (CCCB), a l’Auditori de Barcelona i en diferents espais de la UPC. El Festival reunirà músics, científics i artistes de tot el món de múltiples gèneres, que presentaran en primícia les seves obres i experimentaran amb la Intel·ligència Artificial, en directe.
La presentació de l’AI and Music S+T+ARTS Festival —impulsat en el marc del programa S+T+ARTS de la Comissió Europea— s'ha dut a terme el 21 d'octubre a l'Antiga Fàbrica Estrella Damm a Barcelona i ha anat a càrrec d'Enric Palau i Ricard Robles, codirectors de Sónar. Per part de la Universitat Politècnica de Catalunya · BarcelonaTech (UPC) hi han intervingut Carles Sora, director del Centre de la Imatge i la Tecnologia Multimèdia (CITM) de la UPC, i Ferran Marqués, investigador del Grup de Processat d'Imatge i Vídeo (GPI) i de l'Intelligent Data Science and Artificial Intelligence Research Center (IDEAI-UPC), i professor de l'Escola Tècnica Superior d'Enginyeria de Telecomunicació de Barcelona (ETSETB). Antònia Folguera, comissaria de Sónar+D, ha entrevistat diferents personalitats del món de l'art, la ciència, la recerca i l'ensenyament que participaran en les diferents activitats del Festival.
Laboratori de recerca aplicada
Un dels plats forts de l’AI and Music S+T+ARTS Festival i que transcendirà l’esdeveniment és la creació del Thinking Lab, un laboratori de recerca aplicada on s’explora la interrelació de la Intel·ligència Artificial (IA) i la creativitat musical i, en definitiva, la interacció entre les persones i les màquines. El Thinking Lab està liderat per l'IDEAI-UPC i el CITM de la UPC, i coordinat juntament amb Sónar.
En aquest espai de debat i co-creació, en marxa des del mes d’abril passat, experts, científics, artistes i altres professionals intercanvien experiències i coneixements que, fins ara, han servit per nodrir algunes de les presentacions i espectacles del Festival. Les conclusions es publicaran més endavant en un llibre blanc sobre música i IA. Durant el Festival, el Thinking Lab continuarà essent un espai obert per al debat i l’experimentació per identificar i conceptualitzar els principals reptes i les pràctiques més destacades de l'aplicació de la IA en el context de l’activitat musical.
Grups de co-creació
Sónar i la UPC han impulsat tres grups de co-creació entre artistes i especialistes en IA. Les co-creacions són espais d'intercanvi entre músics i experts en Intel·ligència Artificial destinats a desenvolupar noves actuacions mitjançant l'ús de tècniques de la IA. Cada co-creació treballa sobre una línia de recerca específica: xarxes neuronals, anàlisi d'emocions, visió per computador i captura de moviment.
Dels 21 espectacles programats dins del Festival, la majoria dels quals seran d’estrena mundial, en destaquen alguns que han estat desenvolupats expressament per equips de co-creació. En aquests equips, diversos artistes han treballat colze a colze amb investigadors i investigadores en Intel·ligència Artificial de la UPC. Són els següents espectacles:
- El 27 d’octubre a les 20 h, el concert inaugural del Festival, a l’Auditori de Barcelona, a càrrec del pianista i compositor Marco Mezquida, que ha concebut la seva actuació ‘Piano + AI’ juntament amb els investigadors de l’IDEAI de la UPC Ivan Paz, una figura central de l’escena del Live Coding, i Philippe Salembier, en col·laboració amb l’Escola Superior de Música de Catalunya (ESMUC). Una conversa en viu entre el piano i la Intel·ligència Artificial, fent servir anàlisi d’àudio en temps real i síntesi digital de sons. El piano sol, a l'escenari, experimentant mentre interactua amb un algoritme creat per la UPC i entrenat per reconèixer els timbres de l'instrument.
- El 28 d’octubre, a les 15:30 h, l’espectacle audiovisual ‘Engendered Otherness. A symbiotic AI dance ensemble’, de Hamill Industries i la coreògrafa Kiani del Valle. Un espectacle en què s’ha aplicat la IA al món del ball, creat en col·laboració amb el cantautor Stefano Rosso, i els investigadors de la UPC Martí de Castro, del Departament d'Enginyeria de Sistemes, Automàtica i Informàtica Industrial, i Javier Ruiz, de l’IDEAI. L’actuació empra visió per ordinador i captura de moviment per transformar una coreografia interpretada en temps real per un espectacle de dansa format per Kiani del Valle i els seus ballarins sintètics.
- El dia 28 d’octubre a les 19 h, l’espectacle interactiu de la DJ i productora catalana Awwz, amb participació del públic, que porta per títol ‘Awwz b2b AI DJ’, i que ha comptat amb la participació dels investigadors de l’IDEAI Ioannis Tsiamas, Mireia de Gracia, Casimiro Pio i Marta Ruiz-Costajussà. La performance porta el machine learning al món del djing i convida al públic a col·laborar directament, mitjançant tecnologia d’IA entrenada amb bases de dades musicals a partir d’emojis o textos que recullen estats d’ànim, i que es tradueixen en suggerències de cançons. Compartirà taula amb una DJ artificial que, a partir dels comentaris que es facin a les xarxes, també anirà adaptant les cançons que es van punxant. És a dir, s'adjudaran mútuament per adaptar-se al públic.
- També en format de co-creació, l’AI and Music Festival ha produït el projecte de recerca i art de Holly Herndon, una pionera en l’experimentació amb veu i Intel·ligència Artificial, juntament amb María Arnal i Tarta Relena. Aquest assemblatge de veu únic ha creat una polifonia humana i virtual presentada en exclusiva al Festival, el 28 d’octubre a les 19:45 h.
- Una altra de les presentacions destacades, a l’avantguarda de la tecnologia i la recerca, és ‘Interpreting Quantum Randomness’, un espectacle musical concebut a partir de la col·laboració entre el compositor Reiko Yamada i el físic teòric Maciej Lewenstein, de l’Institut de Ciències Fotòniques (ICFO), amb la col·laboració d’aquest institut universitari de recerca vinculat a la UPC. L’espectacle explora la natura dels sons aleatoris i s'ha pogut veure el 28 d’octubre a les 15:30 h.
- Com a novetat, l'escenari del Pati de les Dones del CCCB ha comptat amb un DJ set titulat 'AI Rave', creat per una xarxa neuronal que ha generat música totalment nova a partir de l'arxiu de programes dels últims cinc anys d'història de l'emissora de ràdio Dublab Barcelona. Aquesta proposta està dissenyada pels artistes radicats a Berlín Dadabots i Hexorcismos.
- Així mateix, dins del programa de vídeo càpsules del Festival, els quals s’emetran també per sonar.es, s'ha presentat, entre d’altres, ‘Human brother’, un projecte del compositor i pianista Ferran Cruixent creat en col·laboració amb el Barcelona Supercomputing Center (BSC) que demostra com la IA coopera amb els artistes en el seu procés creatiu.
Programació de l'AI and Music Festival
Dues hackatons al Campus Nord, avantsala del Festival
L’AI and Music Festival ha arrencat amb dues hackatons en format híbrid, que han tingut lloc en paral·lel al Campus Diagonal Nord de la UPC, el cap de setmana del 23 i 24 d’octubre (24 hores ininterrompudes per participar en remot).
Les dues hackatons són EducationalHack, presentada per Ableton i coorganitzada per Hack@UPC i SokoTech, i LiveCodingHack, presentada per everis an NTT Data Company i coorganitzada per Hack@UPC i Hangar.
Entrades a la venda
Totes les activitats tindran caràcter presencial i bona part de l'oferta de l'AI and Music Festival estarà també disponible online en streaming produït per betevé a través de sonar.es i beteve.cat.
Les entrades per l’AI and Music S+T+ARTS Festival ja estan a la venda des del 15 de setembre, al web del festival. L'estudiantat de la UPC té descompte (preu de l'entrada a 15 euros), acreditant-se amb el carnet d'estudiant.
Aliances entre ciència, tecnologia i arts
La Comissió Europea ha seleccionat el consorci format per Sónar, la UPC i betevé per organitzar l’AI and Music Festival en el marc del programa S+T+ARTS (Science, Technology & the Arts), una iniciativa per fomentar aliances entre ciència, tecnologia i arts. L’AI and Music Festival compta amb el patrocini d’everis, una companyia del Grup NTT DATA.
En el desenvolupament dels continguts del Festival hi han participat entitats de diferents països europeus: Artificia, l’Orquestra Simfònica de Barcelona i Nacional de Catalunya (OBC), IQuantum Music, Polifonia, L’Auditori i l’ESMUC, Factory Berlin i c/o Pop, Bozar, Today’s Art. Polifonia.
