top of page
wonder what’s up there_edited_edited.jpg
Open cultuur tech logo 2.png

Case study: AI, AR, piano's en soundscapes

Eveline Ypma is filmcomponist, multi-instrumentalist en soundscape artist uit Amsterdam. Vincent Höfte een jazzpianist uit Den Haag. Samen met het team van Open Culture Tech hebben beide artiesten gewerkt aan twee unieke concepten waarin we AI en AR gebruiken om de live performance te verrijken met toegankelijke technologie. In dit artikel delen we alvast de eerste uitkomsten van deze voorstellingen.



Eveline Ypma & AI samples

Laugarvatn is een bestaande productie die is opgebouwd uit 3 delen van ongeveer 5 minuten. De voorstelling is vernoemd naar een plek waar Eveline Ypma verschillende field recordings heeft gemaakt tijdens haar residentie op IJsland. Deze field recordings vormen de basis voor 3 soundscapes waarin ze deze field recordings combineert met live zang en basgitaar. Samen met het team van Open Culture Tech is daar een vierde deel van 10 minuten aan toegevoegd waarin de IJslandse field recordings zijn vervangen door AI-gegenereerde geluidsfragmenten, in de stijl van de IJslandse field recordings.


Om originele samples te genereren, speelde Eveline met verschillende text-to-music tools (ChatGPT's voor muziek). Tijdens haar residentie op IJsland heeft Eveline het noorderlicht nooit gezien, dus besloot ze AI te gebruiken om unieke geluidssamples te genereren op basis van de opdracht “Northern Lights Soundscape”. Op deze manier kon Eveline nieuwe muziek creëren, geïnspireerd door haar reis, en een muziekstuk toevoegen aan haar reeds bestaande werk Laugarvatn.



Het resultaat van de samenwerking tussen Eveline Ypma en Open Culture Tech is niet alleen een showcase waarin we generatieve AI hebben gebruikt om samples te genereren voor een live performance, maar ook de eerste versie van eigen open-source AI-tool waarmee iedereen zelf samples kan creëren op basis van prompts. Als je nieuwsgierig bent naar het maakproces van deze tool, en meer wil weten over hoe deze applicatie tot stand is gekomen, lees hier het uitgebreide artikel.



Vincent Höfte & mobiele AR

Vincent Hofte is een jazzpianist die regelmatig op openbare piano’s speelt op stations door heel Nederland. Samen met Open Culture Tech heeft Vincent een korte voorstelling gemaakt waarin hij eigen pianostukken speelt terwijl een mobiele Augmented Reality filter een visuele laag toevoegt aan de werkelijkheid. Door een QR code te scannen met je mobiele telefoon opent de camera op je mobiele telefoon en zie je gekleurde vlakken zweven door de ruimte. Deze vlakken zijn bewerkte foto’s van de stationshal zelf, waardoor een mix ontstaat tussen de architectuur van het station en de herhalende vormen in de foto’s.



In deze show werd de eerste versie van onze eigen Augmented Reality app gebruikt die wij over een aantal maanden gratis en openbaar publiceren. Als je ook nieuwsgierig bent naar het maakproces van deze applicatie, en meer wil weten over hoe deze applicatie tot stand is gekomen, lees hier het uitgebreide artikel.


bottom of page