網路直播
我有話要說
關於華視
服務條款
合作提案
聯絡我們
常見問題Q&A
華視徵才
檢舉信箱
政令短片
自律諮詢委員會
閱讀人意見處理報告
產學合作
公益服務
華視網購
華視FB
華視娛樂show FB
華視新聞APP
華視Youtube
華視google plus
華視文化公司
華視文教基金會
華視訓練中心
視覺辨識結合AI 交大APP助盲友安全外出 | 華視新聞

視覺辨識結合AI 交大APP助盲友安全外出

2017/11/22 09:00 徐湘芸
字級 字級大 字級中 字級小

新聞來源:政大-大學報

【記者徐湘芸綜合報導】盲友以手杖當成感官的延伸,彌補自身蒐集環境資訊的能力。日前國立交通大學的研究團隊,研發出一款名為「Hear your life」的手機應用程式(mobile application, APP)透過視覺辨識技術,幫助視障者進行環境的判讀。

「Hear your life」是一款幫助視障者獲取環境資訊的手機軟體,使用相機輸入視覺資訊與語音輸出環境描述,希望可以輔助視障者購物與外出。 圖/張芷瑄提供

「Hear your life」是一款幫助視障者的手機軟體,使用相機輸入資訊視覺辨識與語音輸出環境描述,幫助盲友進行環境判讀。 圖/張芷瑄提供

Hear your life的運作以手機鏡頭作為資料輸入端,在雲端上以數據進行視覺辨識並產出描述句,之後再回傳手機以語音輸出。「希望這個系統可以輔助視障者外出行動,及透過語音陪伴他們。」團隊成員、交大電控工程研究所碩士張芷瑄表示,最初想建置一個能幫助與陪伴盲友的導航機器人,後因考量方便性與普及度才改為研發手機軟體,「手機是人人皆有的載具,可以更廣泛地推廣出去」。

張芷瑄指出,現階段系統中物品與路面辨識因內建有資料,不受網速限制;而需要網路的環境辨識,在頻寬穩定的情況下,辨識速度從輸入至輸出大約只需1至2秒,「基本上是即時回傳的,幾乎感受不到延遲。」另一名團隊成員、交大電控工程研究所博士後研究員鍾孟良也解釋,環境辨識是以百萬張數據起跳的資料庫為基礎,透過大量資料訓練人工智慧(Artificial Intelligence, AI),並重複測試,提高辨識率。

鍾孟良提到,由於指導老師是名身障者,故研究室較注重相關議題的研究,如智慧輪椅或環境辨識描述。Hear your life的中心理念也是希望透過語音輸出消弭視覺差異。鍾孟良說:「除了功能外,也希望站在視障者角度考量是否合適且方便使用」。

Hear your life的運作以手機鏡頭作為資料輸入端,在雲端上以數據進行視覺辨識並產出描述句,之後再回傳手機以語音輸出。「希望這個系統可以輔助視障者外出行動,及透過語音陪伴他們。」團隊成員、交大電控工程研究所碩士張芷瑄表示,最初想建置一個能幫助與陪伴盲友的導航機器人,後因考量方便性與普及度才改為研發手機軟體,「手機是人人皆有的載具,可以更廣泛地推廣出去」。

張芷瑄指出,現階段系統中物品與路面辨識因內建有資料,不受網速限制;而需要網路的環境辨識,在頻寬穩定的情況下,辨識速度從輸入至輸出大約只需1至2秒,「基本上是即時回傳的,幾乎感受不到延遲。」另一名團隊成員、交大電控工程研究所博士後研究員鍾孟良也解釋,環境辨識是以百萬張數據起跳的資料庫為基礎,透過大量資料訓練人工智慧(Artificial Intelligence, AI),並重複測試,提高辨識率。

鍾孟良提到,由於指導老師是名身障者,故研究室較注重相關議題的研究,如智慧輪椅或環境辨識描述。Hear your life的中心理念也是希望透過語音輸出消弭視覺差異。鍾孟良說:「除了功能外,也希望站在視障者角度考量是否合適且方便使用」。

1-02

「Hear your life」現階段含路面辨識、商場商品辨識、環境辨識三大類,關懷視障者不同生活需求出發。 圖/張芷瑄提供

國外相關技術近年來發展相當快速,市面上也已有相關產品。但張芷瑄指出,國外應用環境辨識技術的智慧眼鏡,市場要價高達約美金2500元,「相比之下,這個程式就是希望能更普及,應用到更多人身上。」她也提到,後續希望著重於蒐集更大量的使用回饋以進行改良,再從單一用戶體驗擴展至社群,「希望與一些盲友組織共同合作,進一步幫助更多視障者」。

「Hear your life」的視覺辨識以手機為載具,希望可以提高普及率,幫助更多的視障人士。 圖/張芷瑄提供

「Hear your life」的視覺辨識以手機為載具,希望可以提高普及率,幫助更多的視障人士。 圖/張芷瑄提供



【更多新聞詳情請上 - 政大-大學報

新聞來源:政大-大學報

相關新聞

分享至

◆ 追蹤更多華視影音及圖文新聞:

1.用Plurk追蹤華視影音及圖文新聞:追蹤
2.用Twitter追蹤華視影音及圖文新聞:追蹤