L'integrazione del modello SL2T (Sign Language-to-Text) all'interno della serie Pixel 11 segna il primo caso in cui un'intelligenza artificiale per la lingua dei segni viene implementata come feature di produzione su uno smartphone. Sviluppato da Google DeepMind con il contributo attivo della comunità sorda, il sistema permette agli utenti di interagire con i dispositivi tramite la lingua dei segni americana (ASL), trasformando i gesti in testo inglese in tempo reale.

Aggiungi AlexTech.ai comeFonte Preferita su Google

Traduzione multimodale e integrazione di sistema

Il modello SL2T non si limita a leggere i gesti delle mani, ma analizza simultaneamente movimenti corporei ed espressioni facciali per garantire una traduzione accurata. La tecnologia è stata integrata direttamente in Gboard e Live Transcribe, permettendo agli utenti sordi o con difficoltà uditive di dettare ricerche, scrivere messaggi e interagire con Gemini senza dover digitare sulla tastiera. Il sistema è ottimizzato anche per scenari d'uso pratici, come la segnalazione con una sola mano mentre si regge il telefono.

Architettura ibrida per la privacy e performance

Google DeepMind Brings Sign Language Translation to Phones With SL2T ... — https://www.unite.ai/google-deepmind-brings-sign-language-translation-to-phones-with-sl2t/

Per bilanciare velocità di risposta e tutela dei dati, DeepMind ha adottato una pipeline ibrida: il pose tracking (il tracciamento della posizione di mani e volto) avviene interamente on-device, mentre la traduzione effettiva viene elaborata lato server. Questa scelta garantisce che le immagini grezze della fotocamera non lascino il dispositivo, inviando al cloud solo i dati vettoriali necessari alla traduzione.

Benchmark e roadmap di espansione

Sul piano tecnico, SL2T raggiunge un punteggio di 70 BLEURT zero-shot sul benchmark FLEURS-ASL, un risultato che DeepMind definisce significativamente superiore a qualsiasi precedente tentativo accademico. L'obiettivo dichiarato è raggiungere una parità di accessibilità tra i sistemi speech-to-text e quelli sign-to-text. Dopo il debutto con l'ASL, Google ha confermato l'intenzione di estendere il supporto a ulteriori lingue dei segni in futuro.

Impatto sul mercato italiano

Sebbene il lancio iniziale si concentri sull'ASL, l'introduzione di SL2T stabilisce un precedente tecnologico per lo sviluppo di strumenti simili per la LIS (Lingua Italiana dei Segni). L'integrazione nativa in Gboard potrebbe spingere altri produttori Android a implementare standard di accessibilità multimodale, riducendo il gap comunicativo per milioni di utenti in Italia che preferiscono la lingua dei segni alla digitazione.