Gli scienziati hanno utilizzato l'IA per trasformare gli orologi intelligenti in un dispositivo di misurazione precisa dei movimenti della mano

Nuove smartwatch‑assistenti dell’Università di Cornell e del KAIST

Gli scienziati dell'Università di Cornell (USA) e dell'Istituto Coreano delle Tecnologie Avanzate (KAIST) hanno creato il sistema WatchHand, che trasforma gli smartwatch comuni in veri e propri tracciatori dei movimenti della mano. Il sistema utilizza solo l'altoparlante integrato e il microfono dello smartwatch, senza richiedere sensori esterni.

Come funziona WatchHand
1. Segnale acustico – lo smartwatch emette onde sonore inaudibili.
2. Ricezione dell’eco – il microfono registra i segnali riflessi e crea un profilo eco.
3. Elaborazione sul dispositivo – un algoritmo di machine learning che opera localmente trasforma il profilo in coordinate della mano su tre assi.

In questo modo, i dati vengono elaborati direttamente sull'orologio, garantendo privacy e latenza minima.

Vantaggi
IndicatoreWatchHandSoluzioni tradizionaliNon richiede sensori esterni✔❌ (telecamere, sensori IMU)Adatto all'uso quotidiano✔❌Scalabilità a milioni di dispositivi✔❌Elaborazione locale dei dati✔❌

Test
- Partecipanti – 40 persone.
- Dati – circa 36 ore di gesti raccolti in quattro esperimenti indipendenti.
- Piattaforme – diversi modelli di smartwatch.
- Scenari – varie posizioni della mano e condizioni rumorose.

I risultati hanno mostrato un tracciamento affidabile dei movimenti delle dita e della rotazione del polso anche in condizioni difficili.

Prospettive d'uso
* Controllo del computer e delle applicazioni tramite gesti.
* Interazione con sistemi AR/VR.
* Assistenza a persone con mobilità o voce limitata.

Il dottorando KAIST Ji‑van Kim osserva: «Se il dispositivo ha altoparlante e microfono, il nostro approccio è applicabile».

Limitazioni e futuro
* Attualmente funziona solo su dispositivi Android.
* L'accuratezza diminuisce durante il movimento dell'utente (ad esempio mentre cammina).

Il team sta attivamente sviluppando miglioramenti per scenari mobili.

I risultati della ricerca saranno presentati alla conferenza ACM CHI 2026 sul fattore umano nei sistemi informatici.

Idea chiave

Il docente associato dell’Università di Cornell, Cheng Zhang, ha concluso: «WatchHand dimostra come un semplice aggiornamento software possa trasformare milioni di smartwatch esistenti in piattaforme intelligenti per il tracciamento del comportamento. Questo apre la strada a nuovi modi di interagire con i dispositivi digitali senza tastiere e mouse».