2017/11/22 09:00

視覺辨識結合AI 交大APP助盲友安全外出

視覺辨識結合AI 交大APP助盲友安全外出 | 華視新聞

徐湘芸

【記者徐湘芸綜合報導】盲友以手杖當成感官的延伸,彌補自身蒐集環境資訊的能力。日前國立交通大學的研究團隊,研發出一款名為「Hear your life」的手機應用程式(mobile application, APP)透過視覺辨識技術,幫助視障者進行環境的判讀。

「Hear your life」是一款幫助視障者獲取環境資訊的手機軟體,使用相機輸入視覺資訊與語音輸出環境描述,希望可以輔助視障者購物與外出。 圖/張芷瑄提供

「Hear your life」是一款幫助視障者的手機軟體,使用相機輸入資訊視覺辨識與語音輸出環境描述,幫助盲友進行環境判讀。 圖/張芷瑄提供

Hear your life的運作以手機鏡頭作為資料輸入端,在雲端上以數據進行視覺辨識並產出描述句,之後再回傳手機以語音輸出。「希望這個系統可以輔助視障者外出行動,及透過語音陪伴他們。」團隊成員、交大電控工程研究所碩士張芷瑄表示,最初想建置一個能幫助與陪伴盲友的導航機器人,後因考量方便性與普及度才改為研發手機軟體,「手機是人人皆有的載具,可以更廣泛地推廣出去」。

張芷瑄指出,現階段系統中物品與路面辨識因內建有資料,不受網速限制;而需要網路的環境辨識,在頻寬穩定的情況下,辨識速度從輸入至輸出大約只需1至2秒,「基本上是即時回傳的,幾乎感受不到延遲。」另一名團隊成員、交大電控工程研究所博士後研究員鍾孟良也解釋,環境辨識是以百萬張數據起跳的資料庫為基礎,透過大量資料訓練人工智慧(Artificial Intelligence, AI),並重複測試,提高辨識率。

鍾孟良提到,由於指導老師是名身障者,故研究室較注重相關議題的研究,如智慧輪椅或環境辨識描述。Hear your life的中心理念也是希望透過語音輸出消弭視覺差異。鍾孟良說:「除了功能外,也希望站在視障者角度考量是否合適且方便使用」。

Hear your life的運作以手機鏡頭作為資料輸入端,在雲端上以數據進行視覺辨識並產出描述句,之後再回傳手機以語音輸出。「希望這個系統可以輔助視障者外出行動,及透過語音陪伴他們。」團隊成員、交大電控工程研究所碩士張芷瑄表示,最初想建置一個能幫助與陪伴盲友的導航機器人,後因考量方便性與普及度才改為研發手機軟體,「手機是人人皆有的載具,可以更廣泛地推廣出去」。

張芷瑄指出,現階段系統中物品與路面辨識因內建有資料,不受網速限制;而需要網路的環境辨識,在頻寬穩定的情況下,辨識速度從輸入至輸出大約只需1至2秒,「基本上是即時回傳的,幾乎感受不到延遲。」另一名團隊成員、交大電控工程研究所博士後研究員鍾孟良也解釋,環境辨識是以百萬張數據起跳的資料庫為基礎,透過大量資料訓練人工智慧(Artificial Intelligence, AI),並重複測試,提高辨識率。

鍾孟良提到,由於指導老師是名身障者,故研究室較注重相關議題的研究,如智慧輪椅或環境辨識描述。Hear your life的中心理念也是希望透過語音輸出消弭視覺差異。鍾孟良說:「除了功能外,也希望站在視障者角度考量是否合適且方便使用」。

1-02

「Hear your life」現階段含路面辨識、商場商品辨識、環境辨識三大類,關懷視障者不同生活需求出發。 圖/張芷瑄提供

國外相關技術近年來發展相當快速,市面上也已有相關產品。但張芷瑄指出,國外應用環境辨識技術的智慧眼鏡,市場要價高達約美金2500元,「相比之下,這個程式就是希望能更普及,應用到更多人身上。」她也提到,後續希望著重於蒐集更大量的使用回饋以進行改良,再從單一用戶體驗擴展至社群,「希望與一些盲友組織共同合作,進一步幫助更多視障者」。

「Hear your life」的視覺辨識以手機為載具,希望可以提高普及率,幫助更多的視障人士。 圖/張芷瑄提供

「Hear your life」的視覺辨識以手機為載具,希望可以提高普及率,幫助更多的視障人士。 圖/張芷瑄提供

新聞來源:政大-大學報



新聞關鍵字

華視新聞 Facebook

加入Line好友