My ears, your eyes.
Interaktive Installation - Sound to Text
Konzeption | Programmierung | Machine learning | Inszenierung
Team: Carla Martini, Laura Schwoch, Lena Janner, Lara Ketzenberg
Im fünftägigen Kurzzeitprojekt „Zero in, zero out“ haben wir den Sound-Output eines anderen Teams mithilfe einer KI in zufällig generierte Dreizeiler und Muster umgewandelt.
Der Ablauf war dabei folgender: Mithilfe von maschinellem Lernen wurde der erzeugte Sound analysiert, kategorisiert und in Wörter sowie Satzfragmente transformiert, die sich zu abstrakten Aussagen zusammenfügten. Diese Texte wurden anschließend über einen Thermodrucker festgehalten.
In der Ausstellung gaben die Besucher den ersten Input in Form einer Bewegung. Diese wurde von Team 01 in visuelle Formen umgewandelt, die Team 02 in Sound transformierte. Schließlich erschuf unser Team 03 mithilfe dieses Sounds, Text in Form von Dreizeilern.
Verwendete Tools waren dabei p5.js, Teachable Machine und Arduino.
