iOS 12 s ARKit 2.0-ansiktsspårning, objektdetektering, USDZ-format, Mät app och mer

Apple startade sin årliga utvecklarkonferens med en grundläggande presentation där VD Tim Cook och andra högprofilerade chefer meddelade att augmented reality (AR) -upplevelser i iOS 12 kommer att dra nytta av ett nytt filformat och många andra förbättringar.

Apples uppdaterade ARKit 2.0-ramverk i iOS 12 gör det möjligt för utvecklare att bygga ännu mer uppslukande augmented reality-upplevelser. Som vi tidigare rapporterat stöder ARKit 2.0 flera användare som alla ser samma utrymme och scen på sin enhet.

En annan sak som ARKit 2.0 gör är ansiktsspårning, vilket kan binda fint med Apples ryktade AR-glasögonprodukt. ARKit 2.0 kan upptäcka verkliga objekt och ersätta dem med virtuella.

De har också skapat ett nytt AR-filformat. Detta nya 3D-filformat, som utvecklats i samarbete med Pixar, för kodning av augmented reality-tillgångar, kallas USDZ.

USDZ är ett kompakt enstaka filformat som har optimerats för att dela och behålla 3D-grafisk trohet och animationer. Det kan användas över hela systemet för att dela augmented reality-upplevelser, från appen Files till Safari till Message and Mail.

I News-appen kan en artikel till och med bädda in en USDZ-tillgång som användaren kan knacka på för att interagera med i AR överlagda över sin egen värld. Egentligen kommer Apple att släppa en exempelapp skriven i Swift för att visa hur lätt det är att hantera dessa delade AR-upplevelser.

Användaren kan placera dessa USDZ 3D-objekt i sin verkliga värld, plus infödda USDZ-support kommer att läggas till Adobes Creative Cloud-program med program så att alla kan skapa dessa saker med lätthet. Dessutom kommer Adobe att släppa en helt ny iPhone- och iPad-app som låter dig designa fantastiska AR-upplevelser snabbt genom att ta in bilder, videor, text eller praktiskt taget något annat objekt från Creative Cloud direkt i en ursprunglig AR-miljö.

Den här appen möjliggör i princip WYSIWYG-redigering i AR, vilket är super coolt.

Sist men inte minst har Apple meddelat en ny mått-app för iPhone och iPad för att mäta nästan vad som helst i din verkliga värld.

Alla de nämnda ARKit 2.0-funktionerna är förutom den befintliga uppsättningen kapacitet och de ytterligare förbättringarna som Apple tog med i januari med ARKit 1.5, liksom förmågan att identifiera vertikala ytor som väggar, samt 2D-bilder som affischer, skyltar och konstverk.