華為StorySign使用AI將兒童讀物翻譯成手語

2020-01-01 16:59:33    來源:    作者:

華為已經(jīng)發(fā)布了StorySign,這是一款新的免費(fèi)產(chǎn)品,它使用人工智能來幫助聾啞或聽障兒童學(xué)習(xí)閱讀。該應(yīng)用程序利用智能手機(jī)的攝像頭跟隨故事書頁面上的文本,顯示一個(gè)動(dòng)畫人物,該人物將單詞翻譯成手語。該應(yīng)用程序由華為AI提供支持。

在下面的視頻中,華為解釋了聾啞兒童在學(xué)習(xí)閱讀方面遇到的麻煩-該問題旨在通過人工智能技術(shù)幫助解決。聾啞兒童由于自身的獨(dú)特困難而常常會延遲語言技能,但是Star(動(dòng)畫化身)的作用是增強(qiáng)現(xiàn)實(shí)感并幫助這些孩子閱讀。

該應(yīng)用程序支持許多兒童讀物,兒童可以使用智能手機(jī)閱讀。在閱讀時(shí),孩子將手機(jī)的攝像頭對準(zhǔn)頁面上的文字,該文字會被應(yīng)用檢測并填充到屏幕中。此時(shí),將Star頭像顯示在文本旁邊,并將其翻譯為手語。

當(dāng)Star簽名時(shí),該應(yīng)用程序突出顯示正在翻譯的單詞。孩子們可以在簽名時(shí)跟隨單詞,將兩者聯(lián)系起來并掌握閱讀技巧。華為在開發(fā)該產(chǎn)品時(shí)與英國聾人協(xié)會和歐洲聾人聯(lián)盟合作。

目前,該應(yīng)用程序支持Penguin Random House提供的經(jīng)典兒童書籍??梢詮娜A為AppGallery和Google Play商店免費(fèi)下載該應(yīng)用程序。該產(chǎn)品似乎在iPhone上不可用。該應(yīng)用程序支持10種歐洲語言,并且該應(yīng)用程序支持的每種語言都有一本兒童讀物。

鄭重聲明:本文版權(quán)歸原作者所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如作者信息標(biāo)記有誤,請第一時(shí)間聯(lián)系我們修改或刪除,多謝。