Depok, 25 Agustus 2023 – Dosen Fakultas Ilmu Komputer Universitas Indonesia (Fasilkom UI) Dr. Ir. Erdefi Rakun, M.Sc., beserta para tim peneliti dari Lab Machine Learning & Computer Vision (MLCV), dan Lab Information Retrival – Natural Language Processing (IR-NLP) baru saja merilis aplikasi penerjemah teks menjadi animasi 3D untuk SIBI. Aplikasi penerjemah tersebut sudah tersedia di Playstore (Android OS) maupun App Store (iOS). Teknologi yang digunakan untuk mengembangkan aplikasi penerjemah tersebut yaitu, image processing, pembuatan animasi, Natural Language Processing (NLP), dan mobile application.
Gerakan isyarat SIBI dapat dibagi menjadi isyarat kata yang terdiri dari isyarat pokok, isyarat imbuhan, kata bentukan dan kata tugas. Selain isyarat kata, SIBI juga memiliki isyarat jari yang terdiri dari alfabet dan bilangan. Salah satu keunikan dari SIBI adalah adanya isyarat kata berimbuhan yang dibentuk dengan menggabungkan gerakan isyarat imbuhan (awalan, akhiran, partikel) dengan gerakan isyarat kata dasar (lihat gambar 1).
Untuk mengembangkan aplikasi penerjemah teks menjadi animasi 3D, tahapan yang diperlukan antara lain, membangun basis data gerakan tangan dan mulut untuk semua kata yang ada di dalam kamus SIBI; proses analisa kalimat input menjadi komponen kata atau imbuhan yang ada pada kalimat (lihat gambar 2); dan membangkitkan animasi untuk masing-masing komponen kata atau imbuhan yang di ambil dari basis data gerakan SIBI (lihat gambar 3).
Terdapat beberapa fitur yang tersedia dalam aplikasi tersebut, yakni fitur untuk mengatur kecepatan animasi, sehingga pengguna bisa mengamati gerakan SIBI sesuai kebutuhannya; fitur untuk memilih karakter animasi 3D sesuai keinginan pengguna (laki-laki atau wanita); fitur zoom in atau zoom out; fitur merotasi model 3D, agar gerakan dapat dilihat dari berbagai arah (kiri, kanan, dan depan); dan fitur bantuan sebagai panduan penggunaan aplikasi. Selain digunakan sebagai penerjemah kalimat Bahasa Indonesia ke animasi 3D SIBI, aplikasi ini juga dapat digunakan sebagai kamus digital dari semua gerakan yang ada di kamus SIBI, dan juga berguna sebagai alat bantu untuk belajar bagaimana berisyarat SIBI dengan benar.
Pengembangan aplikasi penerjemah teks ke animasi 3D SIBI ini melibatkan guru-guru hingga murid Sekolah Luar Biasa (SLB) Santi Rama; SLB Negeri 3 Jakarta; SLB Negeri 12 Jakarta; dan para mahasiswa Fasilkom UI baik dari jenjang Sarjana maupun Magister (Wikan Setiaji, IGM Surya A. Darmana, Sultan Muzahidin, Misael Jonathan). Tim pengembangan aplikasi ini juga dibantu oleh Arya Sidharta yang membantu menyempurnakan database Gerakan; dan Narendra Arief yang menyempurnakan aplikasi mobile.
Selain aplikasi penerjemah teks ke animasi 3D, penelitian Dr. Erdefi Rakun beserta tim menghasilkan beberapa output antara lain:
A. Paten
Judul Paten: Metode Pembangkit Isyarat SIBI (Sistem Isyarat Bahasa Indonesia) Dari Teks Kalimat Bahasa Indonesia Pada Gawai
No Paten: IDS000003290-1
Tahun pemberian: 2020
B. Artikel Ilmiah
Judul: SIBI (Sign System Indonesian Language) Text-to-3D Animation Translation Mobile Application
Jurnal: International Journal of Advanced Computer Science and Applications
Tahun Publikasi: 2022
Volume: 13
Issue: 9
Publisher: Science and Information (SAI) Organization Limited
C. Hak Cipta
Haki Andi
No. Pencatatan: 000253062
Tahun: 2021
Haki Aini
No. Pencatatan: 000253061
Tahun: 2021
Basis Data Gerakan
No. Pencatatan: 000248396
Tahun: 2021
Aplikasi penerjemah teks ke animasi 3D ini diharapkan dapat membantu para tunarungu dan tunawicara dalam melakukan interaksi dikehidupan sehari-hari. Dr. Erdefi juga berharap apa yang telah ia lakukan bersama dengan tim lakukan dapat bermanfaat bagi para jutaan tunarungu dan tunawicara di Indonesia khususnya.
Aplikasi Sistem Isyarat Bahasa Indonesia (SIBI) dapat di unduh melalui tautan berikut: