Terjemahan Pertuturan AI: Teruskan Bercakap dalam Bahasa Sendiri

Anda bercakap dalam bahasa Inggeris dan pihak lain mendengar bahasa Jepun. Mereka menjawab dalam bahasa Jepun dan anda mendengar bahasa Inggeris. Tiada siapa perlu bertukar bahasa, menyalin teks antara aplikasi atau menekan butang main selepas setiap ayat.

Itulah tujuan terjemahan suara ke suara AI: menukar suara orang lain kepada pertuturan yang anda fahami, kemudian menterjemah suara anda kepada bahasa yang mereka fahami. Proses ini berjalan seiring perbualan supaya kedua-dua pihak dapat menumpukan perhatian antara satu sama lain.

TransGull menggunakan pendekatan berbilang proses. Seperti jurubahasa manusia yang mendengar, menterjemah dan bercakap pada masa yang sama, AI terus mendengar pertuturan di bilik ketika bahagian terdahulu sedang diterjemahkan dan dimainkan.

Terjemahan Suara ke Suara Melangkaui Sari Kata

Banyak alat terjemahan suara berhenti setakat teks pada skrin. Anda tidak perlu menaip, tetapi masih perlu menunduk dan membaca. Terjemahan suara ke suara melengkapkan proses: memahami pertuturan dalam satu bahasa, menterjemah maksudnya dan menyebut hasilnya dalam bahasa lain.

Proses ini juga perlu berfungsi dalam kedua-dua arah. Anda mungkin menerangkan masa penghantaran dalam bahasa Inggeris dan meminta TransGull memainkan terjemahan bahasa Jepun. Pihak lain kemudian boleh bertanya dalam bahasa Jepun, dan terjemahannya dimainkan kepada anda dalam bahasa Inggeris.

Teks asal dan terjemahan turut kekal pada skrin. Output suara mengekalkan kelancaran perbualan, manakala teks membantu kedua-dua pihak menyemak nama, nombor, tempat dan istilah khusus.

AI Berbilang Proses Terus Mendengar, Menterjemah dan Bercakap

TransGull tidak menghantar seluruh perbualan kepada satu model lalu menunggu satu respons akhir. Proses khusus mengendalikan tugas masing-masing dan meneruskan hasil mengikut urutan.

Ketika satu segmen sedang diterjemahkan atau menunggu untuk dibacakan, pertuturan seterusnya boleh terus memasuki aliran kerja. Setiap segmen mengekalkan teks asal, terjemahan dan urutan main baliknya, supaya ayat baharu tidak menyingkirkan ayat sebelumnya.

Dengan Terjemahan Serentak AI TransGull, anda tidak perlu memulakan semula terjemahan selepas setiap ayat. Kedua-dua pihak boleh terus membincangkan topik yang sama sementara sistem mendengar, menterjemah dan membacakan kedua-dua bahasa.

AI yang Memahami Konteks Menghasilkan Terjemahan Lebih Semula Jadi

Terjemahan mesin tradisional sering menganggap setiap ayat sebagai teks berasingan. Singkatan, kata ganti nama, perkataan berbilang makna dan maklumat yang tidak dinyatakan boleh menghasilkan terjemahan yang nampak munasabah tetapi salah dalam konteks perbualan.

Katakan perbincangan berkisar tentang rancangan pelancaran pejabat Singapura. Kemudian seseorang berkata, “Alihkan itu ke hari Jumaat.” Sistem yang menterjemah ayat secara berasingan mungkin tidak tahu sama ada “itu” merujuk kepada pejabat, pasukan atau pelancaran. TransGull meletakkan ayat baharu dalam konteks perbualan untuk memahami rujukannya.

Inilah perbezaan penting antara terjemahan model besar yang memahami konteks dengan penggantian frasa biasa: hubungan antara ayat turut dipertimbangkan. Semakin lama perbualan bergantung pada orang, tempat, produk dan matlamat yang sama, semakin penting kesinambungan ini.

Mengapa Tidak Menyerahkan Semua Tugas kepada Satu Model Pertuturan?

Menghantar audio terus kepada satu model dan menerima audio terjemahan mungkin kelihatan lebih mudah, tetapi langkah di antaranya sukar diperiksa. Jika ayat tertinggal atau nama disalahfahami, pendengar hanya menerima hasil akhir dengan sedikit petunjuk tentang punca masalah.

Aliran kerja berbilang proses memisahkan tugas penting sambil menghubungkannya melalui konteks dan urutan yang sama. Pengguna boleh menyemak teks yang dikesan, memeriksa terjemahan dan memastikan hasil suara mengikuti urutan asal. Terjemahan serta penjanaan suara juga boleh diteruskan tanpa memaksa bahagian lain berhenti.

TransGull menumpukan pada tiga hasil:

• Kandungan lengkap: pertuturan yang diterima memasuki aliran kerjanya sendiri dan tidak digantikan oleh ayat seterusnya.
• Kualiti terjemahan: model besar menggunakan konteks perbualan untuk mengurangkan ungkapan kaku dan kesilapan akibat terjemahan ayat secara terasing.
• Operasi stabil: reka bentuk berbilang proses meneruskan hasil terjemahan suara ketika rangkaian berubah-ubah dan mengurangkan kesan halusinasi model.

Pengalaman yang Penting Ialah Perbualan Tanpa Gangguan

Bayangkan dua orang mengesahkan penghantaran produk:

1. Anda berkata, “Sila hantar sampel ke reruai 3 pada hari Jumaat dan hubungi Cik Lee terlebih dahulu.”
2. Pihak lain mendengar terjemahan sementara teks asal dan terjemahan kekal pada skrin.
3. Mereka menjawab dalam bahasa sendiri: “Tiada masalah. Sila hantar nombor telefon Cik Lee.”
4. Anda mendengar terjemahan bahasa Inggeris dan meneruskan perbincangan penghantaran yang sama.

Tidak perlu menghulurkan telefon berulang kali atau memilih arah bahasa untuk setiap ayat. Sistem terus memproses kedua-dua bahasa dan menghantar suara terjemahan yang sesuai kepada setiap pendengar.

Uji Terjemahan Suara Masa Nyata dengan Perbualan Sebenar

Letakkan telefon di tempat yang boleh mendengar kedua-dua pihak, buka tafsiran dua hala dan pilih dua bahasa. Daripada menguji “helo” dan “terima kasih” sahaja, bincangkan satu topik dalam beberapa ayat yang merangkumi nama, nombor dan soalan susulan.

Semak sama ada kedua-dua pihak mendengar bahasa sasaran yang betul, ayat kemudian menggunakan konteks sebelumnya, serta teks asal, terjemahan dan output suara kekal mengikut urutan. Ini lebih bermakna daripada menguji beberapa frasa terpisah. Untuk mengelakkan masalah tangkapan audio disalah anggap sebagai masalah terjemahan, uji di tempat yang sesuai untuk perbualan. Jika bising, dekatkan peranti kepada penutur dan elakkan bercakap serentak.

Nilai Terjemahan Suara Berdasarkan Hasil Perbualan

Perbualan berbilang bahasa berjaya apabila peserta menyelesaikan masalah, membuat keputusan atau membina kepercayaan, bukan sekadar apabila aplikasi menghasilkan lebih banyak ayat terjemahan. Model yang canggih pun belum benar-benar membantu jika pengguna perlu kerap berhenti untuk melaraskannya atau meneka kandungan yang tertinggal.

Cuba TransGull dengan satu tujuan sebenar: mengesahkan penghantaran, bertemu pelanggan luar negara, membincangkan jadual perjalanan atau meminta bantuan penduduk tempatan. Jika selepas lima minit kedua-dua pihak dapat menerangkan keperluan dan menerima respons yang berguna, AI itu sudah menjadi alat komunikasi praktikal, bukan sekadar demonstrasi.