視障新知

【 讓生活更友善】用AI輔助視障者的創意專案

唐育琪

撰文時間:2022/3/23
  如果有一天,當你的眼的前一片黑暗,不再有光明,你有想過這時候該怎麼生活嗎?由Intel在2021年所舉辦的《Intel DevCup x OpenVINO Toolkit》競賽,即出現了許多運用AI輔助視障者的創新解決方案,希望幫助視障者能生活的更無障礙。這些作品誕生的契機皆來自於想協助視障者適應外在的生活,並透過科技賦予防人更多行動自主的能力,此篇文章將帶大家了解這些作品,一起激盪改善作法吧!
  
  你是我的眼:智慧導盲車
  本專案希望設計一個能輔助視障者行走的智慧導盲車,讓視障者在獨處或不便使用輔具的情況下也能容易行動,並且利用智慧導盲車結合其他感應器,使智慧導盲車能協助視障者避障,幫助視障者了解周遭環境的資訊。
  
  此專案使用之硬體ROSKY、Lidar 光達、攝影機、Neuron Pi 主控版、Intel CPU/VPU;軟體方面用到的是Ubuntu 18.04及ROS。
  
  開發過程則是透過語句產生模型,在訓練語句產生模型的部份,他們使用了 COCO Dataset 約 30000 張的圖像來訓練與句模型,並搭配後續的擴充模型與多項機制使模型的輸出語句能更為準確。由於自走車的硬體效能有限,因此他們透過 OpenVINO 加速物件辨識模型來提升模型於導盲車上執行效能。
  
  除了智慧導盲車之外,本次競賽也有許多與輔助視障者工具的概念誕生,下列兩項專案也是使用AI人工智慧去構思一些夠幫助視障者生活更加友善的概念,一起來看看吧!
  
  NTUT導盲專家:智慧導盲杖
  本專案基於AI機器視覺辨識技術來輔助視障者認知外在的需求,他們使用Intel OpenVINO提供之NCS2硬體工具套件來加速PyTorch訓練模型。系統針對視障者在普遍生活中會遇到的障礙物來做辨識,也結合Rasperry Pi 4及周邊硬體模組來提供非視覺回饋之功能,並搭配慣性感測器來判斷導盲杖的姿態,提供當視障者導盲杖落地後能夠聽音辨識出其位置。
  
  智能導盲杖AEYE 馬路如吾口,AI帶我走
  導盲杖是視障朋友生活的一部分,開發團隊(星期四下午)認為在導盲杖上加裝鏡頭作為解決方案是再好不過的選項,因此他們在導盲杖上加裝鏡頭與聲納器,並透過無線網路傳輸影像到DevCloud for the Edge進行運算。運算完成後的結果傳輸到終端裝置 - 手機與藍芽耳機,告知使用者前方的障礙物名稱與距離。
  
  從作品測試影片中可看到,當附近有人或是腳踏車,都會透過此工具告知視障者,以預防任何意外的發生,即便遭遇到了危險,也會傳送位置給親友,因此完全不需要擔心。
  
  小結
  社會中,不乏有許多視障者需要生活機能上的協助,透過這些工具能夠帶給他們更好的體驗,並且實質幫助到他們的食衣住行,視障朋友不論是外出或是生活起居上皆有可能會遇到困難,然而這些產品上市後便可造福更多的人,讓生活更加便利、輕鬆,期盼大家在看這些作品的同時,也能感同身受視障朋友的不便,並在日後給予適度的關懷及體諒。
  
  影片
  1.提供環境識別與避障導引之智慧導盲車 https://youtu.be/Zg2m7-91DVs
  2.NTUT 導盲專家 成果展示影片 https://youtu.be/VNJPxUH2V9w
  3.智能導盲杖AEYE-馬路如吾口,AI帶你走 https://youtu.be/OzGcOMcsQus
  
本文出處:MakerPRO(參考網址)
Top