Cos'è EyeSight sulle cuffie Vision Pro di Apple? Come funziona?

La rivoluzionaria funzionalità EyeSight di Apple Vision Pro è qualcosa che non abbiamo mai visto prima su un visore AR/VR. Quindi, ecco tutto ciò che devi sapere al riguardo.

Le cuffie Vision Pro da $ 3.499 di Apple hanno una funzionalità rivoluzionaria chiamata EyeSight. Integrato in visionOS, EyeSight riduce la sensazione di isolamento quando si indossano le cuffie.

Vision Pro ti fa sentire come se le persone vicine fossero parte della tua esperienza di realtà aumentata (AR). Indica anche agli altri intorno a te se puoi vederli o se sei immerso nell'AR fornendo segnali visivi su ciò su cui sei concentrato.

Segui per scoprire tutto su EyeSight, incluso come funziona, le diverse modalità di immersione che supporta e altro ancora.

Un'interazione di hardware e software, EyeSight è una delle migliori caratteristiche delle cuffie Vision Pro. Il suo scopo principale è mostrare agli altri una versione digitale dei tuoi occhi che battono le palpebre.

"I tuoi occhi sono un indicatore fondamentale di connessione ed emozione, quindi Vision Pro mostra i tuoi occhi quando qualcuno è nelle vicinanze", ha affermato Apple durante il keynote della WWDC 2023. L'effetto fa sembrare il dispositivo trasparente. Inoltre, EyeSight può eseguire il rendering di vari sfondi in movimento per informare le persone nel mondo reale su cosa sei attualmente concentrato.

In un post della Apple Newsroom, Apple definisce la funzionalità "una straordinaria innovazione che aiuta gli utenti a rimanere in contatto con chi li circonda". A dire il vero, non c'è niente di simile a EyeSight su altri visori AR/VR.

Un pannello OLED rivolto verso l'esterno sulla parte anteriore dell'auricolare utilizza una lente lenticolare che, secondo Apple, proietta "la prospettiva corretta dei tuoi occhi a ogni persona che ti guarda".

Quando Vision Pro rileva che stai consumando contenuti multimediali o utilizzando un'app, visualizzerà la grafica appropriata sul display EyeSight per fornire segnali visivi. Tuttavia, quando qualcuno si avvicina a te, Vision Pro mostrerà invece i tuoi occhi.

Per mostrare i tuoi occhi in modo realistico, EyeSight utilizza i dati delle telecamere a infrarossi interne, due per occhio, per catturare i movimenti degli occhi e le espressioni facciali. Questi dati vengono inviati a un algoritmo di apprendimento automatico che li combina con la tua Persona digitale, creata durante la configurazione del dispositivo utilizzando la fotocamera TrueDepth frontale.

Ciò che gli altri vedono è una rappresentazione naturale dell'area intorno ai tuoi occhi piuttosto che i tuoi occhi reali.

EyeSight supporta diversi segnali visivi per far sapere agli altri cosa stai facendo in AR, ad esempio immergerti completamente nell'AR, scattare foto, ecc. EyeSight cambia automaticamente modalità a seconda di ciò che stai facendo in un dato momento. Pertanto, la funzionalità EyeSight è una delle applicazioni più interessanti della tecnologia AR nella vita di tutti i giorni che abbiamo visto fino ad oggi.

Questa modalità ti consente di vedere l'altra persona, rivelandole i tuoi occhi. Quando i sensori delle cuffie rilevano una persona che si avvicina a te, EyeSight la farà "irrompere" temporaneamente nel tuo mondo AR/VR in modo che tu sappia che è nei paraggi.

Allo stesso tempo, la funzione mostrerà i tuoi occhi alla persona di fronte a te in modo che sappiano di avere la tua attenzione. Quando non c'è nessuno nella stanza, EyeSight si spegne e non visualizzerà i tuoi occhi né alcuno sfondo personalizzato.

Quando è completamente immerso in AR o VR, EyeSight anima un motivo colorato sul display rivolto verso l'esterno. L'effetto è in qualche modo simile all'animazione della sfera di Siri e chi ti circonda saprà che sei impegnato con l'attività. EyeSight potrebbe anche rendere i tuoi occhi semitrasparenti quando usi un'app, a seconda del livello di immersione.

EyeSight entra in questa modalità quando si scattano foto e video spaziali utilizzando l'auricolare. Un indicatore visivo per la modalità di acquisizione multimediale è un motivo bianco simile a una nebbia che si anima mentre registri o lampeggia quando scatti una foto.

L'indicatore visivo funge da indicatore essenziale della privacy per le persone intorno a te che le stai registrando, in modo simile al suono dell'otturatore della fotocamera sul tuo iPhone.

Quella che sembrava una voce folle si è rivelata vera. Essendo una caratteristica unica di Vision Pro, EyeSight è uno dei maggiori vantaggi di Apple rispetto ai visori AR/VR concorrenti. Se lo scopo è rendere un po' più umano indossare un computer facciale, EyeSight è all'altezza.