智能手語溝通系統(tǒng)與聾啞人無障礙交流
南京理工大學陳德毅團隊在一次社會實踐中,接觸到了一群聾啞兒童,萌發(fā)了發(fā)明一款能與聾啞人正常交流的軟件的想法。他們最終開發(fā)了一套無障礙手語溝通系統(tǒng),為無聲世界賦予有聲夢想。
該系統(tǒng)實現(xiàn)了軟硬件結合,硬件上,由頭戴式設備上的紅外攝像頭,來追蹤和捕捉手勢動作,軟件上,自主研發(fā)的希聲APP,經(jīng)過在手機上的語音錄入和圖片顯示,實現(xiàn)自然語言與手語語言的雙向互譯。通過“希聲”,聽障人士的手勢信息被雙紅外攝像頭采集,經(jīng)翻譯模塊翻譯成對應語音,供正常人理解,而正常人則對著手機說出想說的話,經(jīng)語音識別后翻譯成對應的手語圖像,供聽障人士理解,以此實現(xiàn)二者的雙向交流。

