כפפה לבישה עם חיישנים נמתחים יכולה לתרגם את שפת הסימנים לדיבור באופן אמיתי

מהנדסי ביו בבית הספר להנדסה של UCLA סמואליי העלו מכשיר דמוי כפפה שיכול לתרגם שפת סימנים אמריקאית לדיבור באנגלית בזמן אמת באמצעות אפליקציית סמארטפון. המערכת כוללת זוג כפפות עם חיישנים דקים ומתוחים שעוברים לאורך כל אחת מחמש האצבעות.

החיישנים על הכפפה מיוצרים מחוטים מוליכים חשמלית ומרימים תנועות ידיים ומיקומי אצבעות (המייצגים אותיות, מספרים, מילים וביטויים בודדים). לאחר מכן המכשיר הופך את תנועות האצבעות לאותות חשמליים, הנשלחים ללוח מעגל בגודל מטבע דולר אשר נלבש על פרק כף היד. הלוח מעביר את האותות האלה באופן אלחוטי לסמארטפון שמתרגם אותם למילים מדוברות בקצב של כמילה אחת לשנייה.

כמו כן, המכשיר כולל חיישני דבק המתאימים על פני הבודקים (בין גבותיהם ובצד אחד של פיהם) כדי ללכוד הבעות פנים המהוות חלק משפת הסימנים האמריקאית. המכשיר מיוצר מפולימרים נמתחים וקלים וזולים אך עמידים לאורך זמן. החיישנים האלקטרוניים הם גם מאוד גמישים וזולים.

המכשיר הלביש נבדק על ארבעה חירשים המשתמשים בשפת הסימנים האמריקאית. הלובשים חזרו על כל תנועת יד 15 פעמים ואלגוריתם מותאם אישית של למידת מכונה הפך את המחוות לאותיות, למספרים ולמילים שהם ייצגו. המערכת זיהתה 660 שלטים, כולל כל אות של האלף-בית ומספרים 0 עד 9. המכשיר אינו מגושם ואינו נוח ומקל על האנשים המשתמשים בשפת הסימנים לתקשר ישירות עם אנשים שאינם חתומים ללא עזרה של מישהו אחר. המודל המסחרי המבוסס על טכנולוגיה זו ידרוש אוצר מילים נוסף וזמן תרגום מהיר יותר.