Facebook kunngjorde et nytt API som lar utviklere innlemme video fra Quest 2s sensorer i spillene og applikasjonene sine, og skaper en blandet virkelighetsopplevelse. Med Passthrough API vil utviklere ikke bare kunne blande svart-hvitt-bilder fra hodesettets sensorer inn i deres opplevelser, men de vil også kunne tilpasse hvordan det ender opp med å se på spilleren, bruke effekter og til og med få den virkelige verden til å vises på spesifikke flater.
Facebooks kunngjøring inneholder eksempler på hvordan API-en kan forbedre produktivitetsprogramvaren ved å tillate integrering av virkelige tastaturer og skrivebord, og hvordan spill kan inkludere dine virkelige møbler for fiender å gjemme seg bak. Det er også lett å forestille seg andre morsomme opplevelser som blander ditt virkelige miljø med en virtuell verden – hva med Portal-puslespill som du løser i ditt eget hus, eller muligheten til å se veggene dine dekket av virtuell maling?
Facebook fortalte UploadVR at API-en for øyeblikket bare var for Quest 2 da han ble spurt om kompatibilitet med førstegenerasjons Quest. I kunngjøringsinnlegget sier Facebook at bildebehandlingen for API-en gjøres på enheten, og at applikasjoner som bruker den ikke vil kunne se eller lagre bildene fra Quest 2s sensorer. Facebook legger til den eksperimentelle versjonen av API-en i de kommende utviklerverktøyene, og den vil først være tilgjengelig for programmerere som bruker Unity for å bygge programvaren. Facebook lover at API-et vil få støtte for andre utviklingsplattformer i fremtiden. Et virtuelt kontor på ditt virkelige kontor Quest-, Quest 2- og Rift S-headset har allerede et versjon av Passthrough-teknologien, som lar brukerne raskt se på hva som skjer rundt dem i den virkelige verden. Facebook lar deg også sette Passthrough som ditt virtuelle miljø, og gir deg en versjon av ditt virkelige miljø (om enn i svart-hvitt) som du kan navigere i Oculus UI i. Det viste til og med den muligheten i en video om sin Infinite Office-funksjon. Evnen til å integrere din virkelige miljø i en virtuell verden har lenge vært et av de mer spennende løftene til hodetelefoner med integrerte kameraer. Microsoft påkalte til og med ideen da den ga navnet VR-plattformen Windows Mixed Reality (uavhengig av hvor mye som faktisk er levert på). Nyhetene om Oculus ’API betyr ikke at du kan hente headsettet og ha en blandet virkelighetsopplevelse i dag. I sin kunngjøring sier Facebook at de ønsker å la utviklere sende programvare som bruker Passthrough til spillere “senere i år.” Likevel er denne API-enes tilgjengelighet for utviklere spennende, da den burde tillate nye typer opplevelser på Oculus-plattformen.
Et eksempel på blandet virkelighetskontroller. Gif: Oculus