Controllo dell'auricolare Vision Pro AR/VR: 6 gesti delle mani per navigare in visionOS

Vision Pro cambia il paradigma di come le persone navigano e interagiscono con il software nella realtà mista. Invece di richiedere controller fisici ingombranti, le cuffie AR/VR di Apple si basano su sofisticati meccanismi di input con cui siamo tutti nati: le nostre mani e i nostri occhi.

Effettua selezioni, scorri, ingrandisci, ruota, sposta gli oggetti e molto altro semplicemente osservando gli oggetti ed eseguendo semplici gesti delle mani che ricordano il Multi-Touch dell'iPhone.

Segui per esplorare i sei gesti delle mani di base utilizzati in visionOS e scopri come il tuo sguardo e le tue mani rendono l'utilizzo del computer spaziale di Apple fluido e senza sforzo.

Come funzionano i gesti delle mani di Vision Pro?

I gesti delle mani in visionOS funzionano in tandem con il tracciamento oculare. I tuoi occhi forniscono targeting e intenti e i gesti attivano azioni specifiche.

Le caratteristiche di VisionPro telecamere anteriori, laterali e inferiori per il tracciamento delle mani e sensori a infrarossi all'interno dell'auricolare per tracciare i tuoi occhi.

Guardi un elemento sullo schermo, come un pulsante, per evidenziarlo o mantieni lo sguardo per espandere il menu contestuale sottostante o rivelare una descrizione comandi. Con la selezione effettuata, esegui un gesto come pizzicare per agire su di essa. Poiché le telecamere esterne coprono un ampio campo visivo, puoi eseguire gesti mentre appoggi comodamente la mano in grembo per evitare sforzi.

Apple ha delineato sei tipi comuni di gesti delle mani per visionOS in a Discorso dello sviluppatore WWDC23 sulla progettazione delle interazioni mano-occhio per l'input spaziale. Insieme agli occhi per il targeting, questi gesti delle mani ti consentono di controllare le app e le interazioni in tutto il sistema.

Rubinetto

Pizzicare le dita insieme eseguirà l'azione predefinita sull'elemento selezionato. Pensa a pizzicare in termini di toccare lo schermo dell'iPhone o fare clic sul mouse o sul trackpad del tuo Mac. Alcune funzionalità di visionOS, come la digitazione aerea sulla tastiera virtuale, non richiedono il gesto del tocco.

Tocca due volte

Pizzica il pollice e l'indice insieme due volte in rapida successione per eseguire l'equivalente del gesto del doppio tocco nei sistemi operativi touch-first come iOS e iPadOS.

Pizzica e tieni premuto

Unisci il pollice e l'indice e tienili momentaneamente per attivare questo gesto. Pizzica e tieni premuto in visionOS funziona in modo simile alla pressione prolungata (tocca e tieni premuto) gesto sul tuo iPhone per evidenziare il testo o richiamare il menu contestuale.

Muovi le dita pizzicate per spostare finestre e altri elementi dell'interfaccia utente in visionOS. Se Safari è di fronte a te, puoi anche tenere la mano in aria e muovere il dito per scorrere.

Pizzica e trascina

Il gesto pizzica e trascina viene utilizzato per lo scorrimento. Basta unire le dita e muovere il polso. Puoi scorrere verso l'alto, il basso, a sinistra oa destra trascinando la mano in qualsiasi direzione.

Più velocemente muovi la mano, più velocemente scorrerai. Puoi scorrere pagine web in Safari, e-mail in Mail, documenti in Pages, fogli di calcolo in Excel, ecc. Puoi utilizzare il gesto di pizzicare e trascinare per scorrere il contenuto in qualsiasi finestra su visionOS che supporta lo scorrimento.

Ingrandisci

Per ingrandire Safari, Foto e altre app, avvicina il pollice e l'indice di entrambe le mani, quindi spostali verso l'esterno. Puoi utilizzare questo gesto per avvicinare o avvicinare una finestra in visionOS, ingrandire le immagini e altro ancora. Nell'app Foto, puoi guardare una parte specifica di un'immagine quando esegui il gesto dello zoom per ingrandirla.

Ruotare

Per ruotare un elemento, pizzicare le dita con entrambe le mani vicine, quindi spostare una mano verso l'alto e l'altra verso il basso. Puoi utilizzare questo gesto per ruotare oggetti 3D in Visualizzazione rapida, immagini nell'app Foto, illustrazioni nei documenti e così via.

Eye and Hand Tracking "Funziona" su Vision Pro

Come sull'iPhone, Apple fornisce un linguaggio gestuale di base per navigare nell'intera interfaccia utente di visionOS e nelle app di realtà aumentata. Gli sviluppatori di terze parti possono sfruttare le API ufficiali di Apple per visionOS per creare e aggiungere input gestuali alle loro app.

Apple sconsiglia di creare gesti personalizzati che si scontrano con quelli di sistema o quelli che non sono facili da capire, eseguire o memorizzare.

Il tracciamento di occhi e mani nelle applicazioni di realtà virtuale, aumentata e mista non è una nuova funzionalità. Tuttavia, l'auricolare Vision Pro implementa queste funzionalità nel modo del marchio Apple. Di conseguenza, navigare in visionOS con gli occhi e le mani è semplice e senza problemi.