Sekitar 500.000 orang Amerika menggunakan Bahasa Isyarat Amerika (ASL). Untuk pengguna ASL yang tuli, komunikasi dengan mereka yang tidak fasih berbahasa dapat menjadi tantangan. Meskipun kebanyakan orang Amerika yang tuli belajar bahasa lisan melalui terapi wicara, beberapa masih mengalami kesulitan membuat diri mereka dipahami secara verbal, atau hanya menemukan bahasa isyarat bentuk yang lebih cair dari mengekspresikan diri.
Sekarang, para peneliti di Texas A&M University telah mengembangkan perangkat yang dapat dipakai yang “menerjemahkan” bahasa isyarat ke dalam bahasa Inggris dengan merasakan gerakan pengguna. Perangkat, masih dalam tahap prototipe, dapat mengenali sekitar 40 tanda ASL dengan akurasi 96 persen.
Sistem ini menggunakan dua sensor. Salah satunya adalah sensor gerak dengan accelerometer dan giroskop, yang mengukur kecepatan dan sudut tangan dan lengan pengguna. Dengan merasakan di mana tangan dan lengan pengguna berada, ia dapat mulai menebak kata apa yang mungkin mereka tandatangani. Lalu ada sensor elektromiografi, yang mengukur potensi listrik dari pergerakan otot. Ia dapat mengetahui dengan pasti bagian mana dari tangan dan jari yang bergerak, yang mana sangat penting.
“Jika Anda melihat kosakata Bahasa Isyarat Amerika, ada kasus di mana tangan itu sendiri bergerak dan kemudian Anda memiliki gerakan jari yang sangat halus, ” kata Roozbeh Jafari, insinyur yang memimpin proyek tersebut. "Jika kamu ingin mendeteksi itu, kamu tidak akan bisa hanya menggunakan gerakan tangan."
Misalnya, kata "tolong" di ASL melibatkan lingkaran di dada Anda dengan tangan terbuka. Kata "maaf" menggunakan gerakan yang identik, tetapi tangan ditutup dalam kepalan.
Sensor dikenakan di pergelangan tangan pengguna. Informasi yang dikumpulkan dikirim melalui Bluetooth ke laptop. Laptop ini menjalankan algoritme untuk menafsirkan tanda dan menampilkan kata dalam bahasa Inggris di layar.
Akhirnya, Jafari berharap untuk meniadakan kebutuhan laptop dengan memasukkan komputer kecil langsung ke perangkat. Komputer kemudian dapat mengirim kata-kata bahasa Inggris ke telepon orang lain, sehingga mereka dapat membaca apa yang dikatakan pasangan percakapan mereka.
Jelas, penerjemah juga harus mahir dalam tanda-tanda jauh lebih dari 40 untuk menjadi produk yang layak. Sementara ada ratusan tanda ASL, 40 tanda asli dipilih karena mereka umum dan bermanfaat, kata Jafari. Seseorang dapat menggunakannya untuk mengucapkan kalimat yang sederhana dan krusial seperti "Saya butuh air." Perangkat juga perlu lebih cepat — saat ini, pengguna harus berhenti di antara kata-kata untuk memberikan waktu untuk menerjemahkan.
"Pada kenyataannya orang tidak berbicara seperti itu, " kata Jafari.
Tetapi sistem yang lebih maju ini, katanya, merupakan jalan keluar, dan akan melibatkan lebih banyak pekerjaan dan pendanaan.
Teknologi terjemahan ASL sebelumnya telah menggunakan kamera untuk membaca gerakan. Tetapi ini tidak bekerja dengan baik dalam kondisi pencahayaan rendah, kata Jafari. Plus, banyak orang tidak suka gagasan memiliki kamera menonton mereka sepanjang waktu.
Sejumlah teknologi lain telah diciptakan dalam beberapa tahun terakhir untuk membantu orang tuli dan mendengar berkomunikasi satu sama lain. Sebuah aplikasi bernama Transcense, dirilis tahun lalu, menerjemahkan ucapan dari banyak orang menjadi kata-kata tertulis, dan menyajikannya di layar dalam gelembung kode warna. Ini dimaksudkan untuk membantu orang tuli di pertemuan atau dalam situasi sosial, di mana banyak pembicara dapat menjadi tantangan bagi pembaca bibir yang paling cakap sekalipun. Perusahaan lain, MotionSavvy, telah mengerjakan tablet yang menginterpretasikan gerakan ASL dan membaca kata-katanya dengan lantang dalam bahasa Inggris. Di Cina, para peneliti telah menggunakan peralatan penginderaan gerak Microsoft Kinect untuk menerjemahkan Bahasa Isyarat Cina ke dalam kata-kata lisan dan tulisan.
Sebagai seseorang yang telah lama bekerja dengan teknologi yang dapat dipakai, seperti jam tangan yang memantau irama jantung, Jafari memahami pentingnya kenyamanan dan estetika. Jika perangkat tidak nyaman dan menonjol, orang tidak akan memakainya. Prototipe saat ini dari perangkat terjemahan bahasa isyarat terlihat seperti alat medis, dengan elektroda dan tali dan kabel. Jafari ingin versi finalnya kecil dan menarik.
"Saya ingin membuat seluruh sistem pas dalam arloji, " katanya.
