Algoritma Pelacakan Tangan Waktu Nyata Google Menggunakan Ponsel Cerdas Untuk Meningkatkan Pengenalan Bahasa Isyarat
Bahasa Isyarat digunakan oleh jutaan orang di seluruh dunia. Para peneliti telah bekerja untuk membangun teknologi yang dapat memahami isyarat dan secara otomatis mengubahnya menjadi bahasa yang dapat dimengerti manusia. Namun, proyek semacam itu belum mendapatkan kesuksesan besar dalam hal keakuratan.
Google baru-baru ini mengembangkan algoritme yang dapat digunakan untuk pelacakan tangan waktu nyata. Sistem cerdas memanfaatkan pembelajaran mesin untuk membuat peta tangan. Peta dibuat dengan bantuan kamera atau smartphone. Kami tidak dapat menyangkal fakta bahwa sebagian besar sistem gagal menangkap gerakan cepat secara akurat. Google secara khusus membahas masalah ini dalam penelitian ini. Menariknya, mereka telah membatasi jumlah data yang sebelumnya diproses oleh algoritme.
Bagaimana Cara Kerja Pelacakan Tangan Waktu Nyata?
Sebagian besar proyek yang ada menerjemahkan bahasa isyarat dengan mendeteksi ukuran dan posisi tangan yang lengkap. Dengan penelitian ini. para peneliti telah menghilangkan kebutuhan untuk menangani bentuk persegi panjang dalam berbagai ukuran. Sistem Google hanya mengenali telapak tangan yang berbentuk persegi. Kedua, proses analisis terpisah dilakukan untuk jari.
Para peneliti menggunakan sekitar 30.000 gambar tangan untuk melatih algoritma pembelajaran mesin. Gambar-gambar ini ditangkap dalam berbagai kondisi dan pose penerangan yang berbeda. Sistem kemudian mendeteksi isyarat dengan membuat perbandingan antara pose tangan dan daftar entitas yang diketahui seperti bola atau kebahagiaan. Google mendeskripsikan pengenalan gerakan dalam postingan blog.
Algoritme pelacakan tangan terakhir menghasilkan hasil yang canggih dalam hal kecepatan dan akurasinya. Algoritme menggunakan kerangka MediaPipe untuk dijalankan. Teknik ini sepertinya merupakan kemajuan besar dalam domain bahasa isyarat. Meskipun masih ada banyak ruang untuk perbaikan. untuk menciptakan pemahaman yang lebih baik tentang bahasa isyarat. Siapapun dapat memperluas pekerjaan ini dengan menggunakan ekspresi wajah dan kedua tangan untuk mencapai hasil yang lebih baik.
Meski belum ada kabar dari Google, ada kemungkinan Google bisa menyempurnakan teknologi pelacak tangan real-time ini untuk digunakan dalam produknya. Sementara itu, jika Anda ingin bermain-main dengan kode, kode itu tersedia untuk umum di GitHub.