Een online orkest dirigeren met Semi-Conductor

Een online orkest dirigeren met Semi-Conductor

Altijd al je eigen orkest willen dirigeren? De webtoepassing Semi-Conductor van Google maakt het mogelijk!

Om te voorkomen dat getalenteerde medewerkers met start-up-plannen vertrekken zette Google een paar jaar geleden intern een eigen ‘laboratorium’ op voor start-ups. ‘Semi-conductor’, een webtoepassing waarmee je een AI-strijkorkest dirigeert, is één van de recente creatieve voortbrengselen van de Australische tak van Google Creative Lab.

Semiconductor2

Via drie eenvoudige introductieplaatjes leer je hoe je met de juiste bewegingen kunt aangeven in welke mate je de virtuele muzikanten harder, zachter, sneller of trager wilt laten spelen. Ook leer je hoe je de strijkersgroepen afzonderlijk aanstuurt. Daarna geef je de browser toegang tot de de webcam en neem je plaats voor het strijkorkest om een van de populairste werken van Mozart in te zetten: Eine kleine Nachtmusik. In het begin komt het werk nog niet helemaal herkenbaar uit de speakers. Maar als je de noodzakelijke bewegingen eenmaal onder de knie hebt, kun je zorgen voor meer verfijnde tempowisselingen.

Semi-Conductor maakt gebruik van PoseNet, een machine-learningbibliotheek. PoseNet herkent welke houding iemand van de webcam inneemt. Met deze AI-technologie wil Google toepassingen ontwikkelen voor augmented reality, animatie en fitnessgebruik. In deze toepassing bedien je met je lichaam een algoritme dat honderden kleine audiobestanden van live opgenomen instrumenten aanspreekt. Alleen het applaus ontbreekt. 

Mocht je ooit een bezoek brengen aan de stad Wenen, neem dan een ook kijkje in het ‘Haus der Musik’, waar je op ongeveer dezelfde manier een orkest kunt dirigeren. Bekijk een zelfgemaakt filmpje om een indruk te krijgen.