
唇語(yǔ)翻譯算法設計是針對偏復雜的模式識別,深層神經(jīng)網(wǎng)絡(luò )DNN通過(guò)測量舌頭、下顎、軟腭和嘴唇的協(xié)調動(dòng)作來(lái)識別嘴正在發(fā)音的某個(gè)詞語(yǔ)。系統會(huì )對測量出來(lái)的數據進(jìn)行訓練,把發(fā)音語(yǔ)音信號轉換成為聲學(xué)語(yǔ)音信號,方便其他用戶(hù)獲取到準確的信息,不會(huì )影響溝通的效果。
通過(guò)解碼皮層語(yǔ)言相關(guān)活動(dòng),能實(shí)時(shí)控制語(yǔ)音合成器,從而幫助有嚴重發(fā)聲障礙的人恢復交流,科學(xué)家會(huì )根據發(fā)生障礙者的特征來(lái)進(jìn)行大腦信號解碼,將其翻譯成語(yǔ)音。
除了唇語(yǔ)翻譯,系統還能進(jìn)行其他語(yǔ)言翻譯,并且具備自我學(xué)習到能力。通過(guò)人工智能訓練學(xué)習,系統掌握了語(yǔ)言的特征之后,就能立即自動(dòng)掌握從X到Z語(yǔ)言的翻譯。
開(kāi)發(fā)唇語(yǔ)翻譯APP能夠幫助失語(yǔ)者恢復交流,讓他們的生活更加順暢,擁有更多樂(lè )趣。