Facebook ha annunciato una nuova API che consentirà agli sviluppatori di incorporare video dai sensori di Quest 2 nei loro giochi e applicazioni, creando un'esperienza di realtà mista. Con l'API Passthrough, gli sviluppatori non solo saranno in grado di combinare le immagini in bianco e nero dai sensori dell'auricolare nelle loro esperienze, ma saranno anche in grado di personalizzare il modo in cui finisce per guardare al giocatore, applicare effetti e persino mostrare il mondo reale su superfici specifiche.
L'annuncio di Facebook include esempi di come l'API potrebbe migliorare il software di produttività consentendo l'integrazione di tastiere e scrivanie reali e di come i giochi potrebbero includere i mobili della vita reale per i nemici dietro cui nascondersi. È anche facile immaginare altre esperienze divertenti che mescolano il tuo ambiente reale con un mondo virtuale: che ne dici di enigmi in stile Portal che risolvi a casa tua o della possibilità di vedere le tue pareti ricoperte di vernice virtuale?
Un esempio di controlli di realtà mista. Gif: Oculus Facebook ha detto a UploadVR che l'API era attualmente solo per Quest 2 quando gli è stato chiesto della compatibilità con la Quest di prima generazione. Nel post dell'annuncio, Facebook afferma che l'elaborazione delle immagini per l'API viene eseguita sul dispositivo e che le applicazioni che la utilizzano non saranno in grado di vedere o memorizzare le immagini dai sensori di Quest 2.
Facebook sta aggiungendo la versione sperimentale dell'API ai suoi prossimi strumenti di sviluppo e sarà disponibile prima per i programmatori che utilizzano Unity per creare il proprio software. Facebook promette che l'API riceverà supporto per altre piattaforme di sviluppo in futuro.
Un ufficio virtuale nel tuo ufficio reale
Le cuffie Quest, Quest 2 e Rift S hanno già un versione della tecnologia Passthrough, che consente agli utenti di dare una rapida occhiata a ciò che accade intorno a loro nel mondo reale. Facebook ti consente anche di impostare Passthrough come ambiente virtuale, offrendoti una versione del tuo ambiente reale (anche se in bianco e nero) in cui puoi navigare nell'interfaccia utente di Oculus. Ha persino mostrato questa capacità in un video sulla sua funzione Infinite Office.
La capacità di integrare il tuo ambiente in un mondo virtuale è stata a lungo una delle promesse più entusiasmanti delle cuffie con fotocamera integrata. Microsoft ha persino invocato l'idea quando ha chiamato la sua piattaforma VR Windows Mixed Reality (indipendentemente da quanto è stato effettivamente consegnato).
La notizia dell'API di Oculus non significa che oggi sarai in grado di prendere in mano il visore e vivere un'esperienza di realtà mista. Nel suo annuncio, Facebook afferma che sta cercando di consentire agli sviluppatori di spedire software utilizzando Passthrough ai giocatori “entro la fine dell'anno”. Tuttavia, la disponibilità di questa API per gli sviluppatori è entusiasmante, in quanto dovrebbe consentire nuovi tipi di esperienze sulla piattaforma Oculus.