淡江大學與中華電信共同合作開發「盲用、銀髮族隨身助理App」,盲胞以手機拍下鈔票影像,可自動辨識5個家國鈔票幣值,目前開放Android版本下載,明年推出iOS版本。

生活上經常用到的物品,盲胞平常可以觸感辨別,但某些物品則因為太過相似,導致辨別上的困難,例如外出經常用的到的紙鈔,輔助App可利用影像辨識協助處理。

這款輔助App是由淡江大學盲生資源中心和中華電信研究院共同開發,去年已先推出第一版,今年運用影像、語音辨識技術提昇App功能,利用普及的智慧型手機、App,不只供盲胞使用,也適合視覺退化的銀髮族日常生活上使用。

淡江大學盲生資源中心系統工程師張金順表示,新版App獲得中華電信協助,運用語音辨識、視覺協助等功能,讓盲人或銀髮族以手機App就能夠下達語音命令,或協助辨識手上紙鈔幣值,其他物品也能透過志工、社群力量協助辨識,加上擴展到手機端的雲端閱讀,大幅提昇輔助App功能。

以收聽廣播電台為例,盲胞開啟App後只要對著手機說出想收聽的電台名稱,經由手機上網連接後端語音辨識系統處理,手機便會自動連接到該電台,盲胞還能以語音命令查詢股票、新聞、公車動態等其他資訊,查詢到的資訊再由Android上的Talk Back及中華電信的語音引擎以語音方式說明。

去年第一版輔助App就已加入影像辨識功能,但是只能辨識台幣,第二版App擴大辨識幣別,除了本國使用的台幣之外,也能辨別人民幣、日幣、美金、歐元,主要原理為盲生資源中心建置一套影像資料庫,一張紙鈔不同角度拍下200到300張影像建置資料庫後,盲胞以手機拍下紙鈔一部份角落上傳到辨識系統,就能完成辨識,自動以語音說出紙鈔幣值。

紙鈔以外的其他物品則仰賴人力幫忙,例如想要購買鮮奶時,盲胞可以手機拍下商品照片上傳到淡大盲生資源中心,再由志工回報正確的商品文字訊息,再由手機輔助App以語音說出來讓盲胞知曉。

張金順表示,志工有人力上的限制,為發揮最大效益,資源中心希望運用社交網路建立志工社群力量,號召民眾加入志工社群,目前已完成了Skype社群,Facebook社群正在建置中,有意願幫忙的朋友可以搜尋物品辨識加入社群,盲胞上傳照片後,系統會將照片自動傳給線上志工,由志工在2分鐘內回報物品名稱。

除了語音及生活上物品辨識,新版輔助App還提供安全回報功能,利用現在智慧型手機上普遍內建的GPS定位,只要事先設定好回報的對象,老人家或盲胞外出時就能快速回報所在地點向家人報平安。其他功能還有點字書圖書館,提供超過3萬本的點字書線上閱讀。

目前「盲用、銀髮族隨身助理App」僅支援Android裝置,可從教育部無障礙全球資訊網(http://www.batol.net)下載,今年底前將上架到中華電信Hami Apps、Google Play軟體商店。iOS版本將於明年推出。

熱門新聞

Advertisement