Lama Baca 6 Menit

Baidu AI Rilis Platform Canggih Penerjemah Bahasa Isyarat

04 March 2022, 13:41 WIB

Baidu AI Rilis Platform Canggih Penerjemah Bahasa Isyarat-Image-1

Ilustrasi orang mneggunakan platform penerjemahan - Image from Baidu

Bolong.id - Baidu AI Cloud, penyedia cloud AI terkemuka, meluncurkan platform bahasa isyarat AI pada Kamis (3/3/2022) lalu. Platform ini mampu menghasilkan avatar digital untuk terjemahan bahasa isyarat dan interpretasi langsung dalam hitungan menit. Dirilis sebagai penawaran baru platform avatar digital Baidu AI Cloud XiLing, platform ini bertujuan untuk membantu meruntuhkan hambatan komunikasi bagi komunitas tunarungu dan gangguan pendengaran (DHH) dengan meningkatkan aksesibilitas terjemahan bahasa isyarat otomatis. Penerjemah bahasa isyarat AI yang dikembangkan menggunakan platform akan melakukan tugasnya selama Paralimpiade Musim Dingin Beijing 2022 mendatang.

Dirilis bersamaan dengan platform di atas, ada dua penerjemah bahasa isyarat AI all-in-one, yang memberikan solusi satu atap dengan proses pengaturan yang efisien dan fitur plug-and-use. Dengan mengaktifkan penyebaran layanan publik dalam skala besar, penerjemah telah dirancang untuk berbagai skenario penggunaan seperti rumah sakit, bank, bandara, stasiun bus, dan area publik lainnya.

Dilansir dari 蓝鲸财经记者工作平台 pada Kamis (3/3/2022), "dengan pemberdayaan teknologi yang dibawa oleh AI, biaya produksi dan operasional avatar digital telah dikurangi ke tingkat yang signifikan. Memungkinkan bahasa isyarat AI untuk berkembang dan melayani lebih banyak tunarungu dan gangguan pendengaran", kata Tian Wu, Wakil Presiden Perusahaan Baidu.

Saat ini, Tiongkok adalah rumah bagi 27,8 juta orang tunarungu dan gangguan pendengaran (DHH) tetapi dihadapkan dengan kekurangan profesional yang memenuhi syarat untuk melayani kebutuhan mereka. Memiliki kurang dari 10.000 penerjemah bahasa isyarat. Kesenjangan sangat dirasakan terutama dalam bidang medis dan pengaturan hukum.

Platform bahasa isyarat AI XiLing dan penerjemah bahasa isyarat all-in-one dirancang untuk mengisi kesenjangan yang signifikan ini dan mengatasi kesulitan komunikasi yang dihadapi komunitas DHH baik dalam pengaturan online maupun offline. Untuk individu DHH yang ingin belajar atau bersosialisasi secara online tanpa hambatan, platform ini dapat dengan cepat diintegrasikan ke dalam aplikasi seluler, situs web, dan program mini yang umum digunakan hanya dalam beberapa jam. Melakukan fungsi seperti sintesis video bahasa isyarat dan sintesis streaming langsung, menerjemahkan teks-ke- bahasa isyarat, dan menerjemahkan bahasa isyarat ke audio.

Baidu AI Rilis Platform Canggih Penerjemah Bahasa Isyarat-Image-2

Penerjemah All-in-one Baidu - Image from prnasia

Penerjemah Baidu hadir dengan dua model, versi full offline V3, dan versi P3 yang terhubung ke cloud. Keduanya disematkan dengan fungsi inti dari platform bahasa isyarat AI, mampu mewujudkan pengenalan ucapan ASR, terjemahan ucapan, dan rendering potret. Rangkaian lengkap fungsi ini menawarkan potensi luar biasa untuk memberdayakan DHH. Misalnya, individu akan dapat mengunjungi rumah sakit dan mengikuti proses pendaftaran, konsultasi, pembayaran, dan pengambilan obat yang rumit tanpa bantuan. Aplikasi tambahan memiliki potensi untuk memungkinkan komunitas DHH untuk bepergian, makan, dan bahkan bekerja secara mandiri.

Teknis dalam platform secara lebih dalam

Dibandingkan dengan terjemahan antar bahasa lisan, terjemahan bahasa isyarat lebih rumit karena tidak diterjemahkan kata demi kata dari ucapan verbal. Sebaliknya, penyempurnaan bahasa dan urutan kata harus disesuaikan untuk menunjukkan arti kalimat yang sebenarnya. Sebagai bahasa yang relatif jarang digunakan, jumlah data bahasa isyarat yang tersedia untuk pembelajaran mesin sangat terbatas. Ini juga membutuhkan bahasa bibir dan ekspresi wajah untuk membantu pemahaman. Dalam pengaturan dunia nyata, sering dihadapkan dengan faktor lingkungan yang kompleks sehingga sulit untuk diterapkan. Semua hambatan praktis ini telah menimbulkan banyak tantangan bagi pengembangan bahasa isyarat AI.

Untuk membuat bahasa isyarat AI dapat dipahami, para ilmuwan Baidu harus menyelesaikan tiga tantangan utama yaitu: kejelasan pengenalan suara, keakuratan terjemahan bahasa isyarat, dan kelancaran gerakan bahasa isyarat.

Untuk mengatasi kejelasan pengenalan suara, platform bahasa isyarat XiLing AI menggunakan model pengenalan suara SMLTA buatan Baidu untuk mencapai pemodelan pengenalan suara ujung-ke-ujung melalui integrasi akustik dan bahasa. Berdasarkan algoritma deep learning yang dikembangkan sendiri oleh Baidu, pelatihan yang ditargetkan dapat memungkinkan akurasi kata di berbagai bidang seperti pariwisata, perawatan medis, dan hukum.

Baidu AI Rilis Platform Canggih Penerjemah Bahasa Isyarat-Image-3

Avatar penerjemah - Image from centralcharts.com

Dalam hal akurasi dan penyempurnaan terjemahan bahasa isyarat, Baidu telah membangun model terjemahan bahasa isyarat berbasis jaringan saraf pertama dengan tingkat penyempurnaan yang dapat dikontrol. Secara otomatis dapat mempelajari pengetahuan terjemahan bahasa isyarat dari data yang real seperti penyesuaian urutan kata. Pemetaan dan kontrol panjang untuk menghasilkan bahasa isyarat alami yang sesuai dengan kebiasaan orang-orang yang mengalami gangguan pendengaran.

Untuk memastikan keakuratan terjemahan bahasa isyarat, Baidu telah mengundang lebih dari 500 ahli dan siswa dengan gangguan pendengaran di Tiongkok. Membantu mengembangkan dan memeriksa korpus bahasa isyarat.

Untuk memastikan kelancaran tindakan bahasa isyarat, platform bahasa isyarat AI telah menyortir hampir 11.000 tindakan berdasarkan Kamus Bahasa Isyarat Universal Nasional dengan algoritma fusi tindakan. Sehingga semua gerakan bahasa isyarat digital memiliki tingkat perpaduan dan ekspresi sebagai bahasa isyarat manusia. Selain itu, dengan bantuan teknologi pemindaian 4D, akurasi pembuatan bentuk mulut telah dioptimalkan hingga 98,5%.


Informasi Seputar Tiongkok