Kodkonstnären Zach Lieberman har utnyttjat Apples nya ARKit-ramverk i iOS 11 för att bygga en trippy proof-of-concept rumslig ljudapp som kan användas för att spela in ljud i förstärkt verklighet och spela upp den genom att bokstavligen flytta igenom virtuella 3D-vågformer.
Här är en snabb video som visar detta i aktion (se till att slå på ljud)
Snabbtest för att spela in ljud i rymden och spela upp genom att flytta igenom det (video har ljud!) #Openframeworks pic.twitter.com/GdZcK3rj1L
- zach lieberman (@zachlieberman) 6 september 2017
Han byggde den med ARKit och OpenFrameworks, en öppen källkod C ++ verktygssats för kreativ kodning.
Jag kan se användningar av detta i museer som en interaktiv konstinstallation av olika slag: föreställ dig att spela in musikaliska kompositioner på detta sätt med anteckningar och rytmer som upptar rymdmönster som människor kan spela upp genom att flytta genom 3D-vågformer.
Man kan till och med sätta upp en installation eller ett dedikerat fitnessspår där människor kunde jogga genom en kurs för att spela förinspelad musik. Eller, vad sägs om en Scavenger-jakt i förstärkt verklighet där du måste hitta ljudtrådar över hela huset?
Möjligheterna är oändliga - om du kan göra rumsligt ljud med ARKit, är det inte en sträcka att föreställa sig augmented reality-ord, tweets, emoji, flytande musikark osv..
Här är fler demonstrationer från Zach som visar hur ARKit upptäcker objektpunkter i realtid.
Snabbtest animera punktmolndata pic.twitter.com/34mQvuKXNd
- zach lieberman (@zachlieberman) 1 september 2017
En annan bild.twitter.com/5RSFSzSg5N
- zach lieberman (@zachlieberman) 31 augusti 2017
Det är coolt att titta på funktionspunkterna och se modellen den bygger (thx @xavitribo) pic.twitter.com/8rqObs8seI
- zach lieberman (@zachlieberman) 31 augusti 2017
Zachs demo tänker på The Light Barrier-serien av studion Kimchi och Chips, ett projekt som skapar volymetriska ritningar i luften med hundratals kalibrerade videoprojektioner. Som visas i videon inbäddad nedan, smälter dessa ljusprojektioner i ett fält av dimma för att skapa grafiska objekt som animerar genom det fysiska utrymmet som de gör i tid.
Tidigare idag visade vi dig den ultimata mät-appen av utvecklaren Rinat Khanov, kallad MätKit, som du kan använda för att mäta nästan vad som helst - som en persons höjd, avstånd till objekt, vinkel mellan två punkter och mer - genom att peka din iPhone mot objekt.
Hur gillar du den här nya ARKit-demonstrationen??
