Facebook tillkännagav ett nytt API som låter utvecklare integrera video från Quest 2: s sensorer i sina spel och applikationer, vilket skapar en blandad verklighetsupplevelse. Med Passthrough API kommer utvecklare inte bara att kunna blanda de svartvita bilderna från headsetets sensorer i sina upplevelser, men de kommer också att kunna anpassa hur det hamnar på spelaren, tillämpa effekter och till och med ha den verkliga världen att dyka upp på specifika ytor.
Facebooks tillkännagivande innehåller exempel på hur API: n kan förbättra produktivitetsprogramvaran genom att möjliggöra integrering av verkliga tangentbord och skrivbord, och hur spel kan inkludera dina verkliga möbler för fiender att gömma sig bakom. Det är också lätt att föreställa sig andra roliga upplevelser som blandar din verkliga miljö med en virtuell värld – vad sägs om Portal-pussel som du löser i ditt eget hus eller förmågan att se dina väggar täckta med virtuell färg?
Facebook berättade för UploadVR att API för närvarande endast var för Quest 2 när man frågades om kompatibilitet med första generationens Quest. I tillkännagivandeposten säger Facebook att bildbehandlingen för API: et sker på enheten och att applikationer som använder det inte kommer att kunna se eller lagra bilderna från Quest 2: s sensorer. Facebook lägger till den experimentella versionen av API: et i sina kommande utvecklarverktyg, och det kommer att vara tillgängligt först för programmerare som använder Unity för att bygga sin programvara. Facebook lovar att API: n kommer att få stöd för andra utvecklingsplattformar i framtiden. Ett virtuellt kontor på ditt riktiga kontor Quest-, Quest 2- och Rift S-headset har redan en version av Passthrough-tekniken, som låter användare få en snabb titt på vad som händer runt dem i den verkliga världen. Facebook låter dig också ställa in Passthrough som din virtuella miljö, vilket ger dig en version av din verkliga miljö (om än i svartvitt) som du kan navigera i Oculus UI i. Det visade till och med den förmågan i en video om dess Infinite Office-funktion. Möjligheten att integrera din verkliga miljö i en virtuell värld har länge varit ett av de mer spännande löften från headset med integrerade kameror. Microsoft åberopade till och med idén när den namngav sin VR-plattform Windows Mixed Reality (oavsett hur mycket som faktiskt har levererats). Nyheten om Oculus API betyder inte att du kommer att kunna plocka upp ditt headset och ha en blandad verklighetsupplevelse idag. I sitt tillkännagivande säger Facebook att de vill låta utvecklare skicka programvara som använder Passthrough till spelare “senare i år.” Ändå är detta API: s tillgänglighet för utvecklare spännande, eftersom det borde möjliggöra nya typer av upplevelser på Oculus-plattformen.
Ett exempel på blandade verklighetskontroller. Gif: Oculus