為語言障礙者重啟溝通的OTTAA專案

分享至

你平常都用什麼方式和他人溝通呢?你知道語言障礙者是如何和他人溝通的嗎?如果加上「科技」元素,你還知道哪些溝通方式呢?你想到的選項,也許都和今天的主題有關。溝通的順暢與否,影響了語言障礙者受教育的品質和社交互動狀態,因此突顯出「科技」角色的重要。本篇文章將帶你瞭解運用人工智慧技術的OTTAA專案如何幫助語言障礙人士和他人溝通、溝通相關的概念、輔助科技的發展和建議、輔助科技和永續的關聯。

撰文|Fin

圖1:科技協助人群與世界溝通|來源:Wikimedia Commons

 

OTTAA專案緣起

OTTAA專案由一對兄弟和各領域成員組成,這對兄弟的祖母Lidia由於罹患阿茲海默症,無法和他們溝通,因此他們創立了OTTAA平臺。此平臺是一種協助語言障礙人士的「擴大及替代性輔助溝通系統」(Augmentative and Alternative Communication. AAC),能改善語言障礙者的生活方式、幫助他們重獲自主權。2016年開始的OTTAA專案,後來獲得聯合國兒童基金會創投 (UNICEF Venture Fund) 的資助,開始測試新市場,現在平臺的使用者包含厄瓜多、瓜地馬拉、薩爾瓦多等國家,目前繼續整合GPT技術,以實現進階的預測功能和創造句子功能。

 

什麼是AAC?

根據美國聽語學會 (ASHA, 2024) 的定義,AAC指的是談話以外的所有溝通方式。所有年齡層的人若在語言方面有困難,都可以使用AAC。擴大 (Augmentative) 指的是增添到此人的言語中,而替代 (Alternative),則是代替言語。AAC有不同類型,非技術和低技術類型包括:手勢、臉部表情、寫作、繪畫、指著照片、圖片或文字等;高科技類型則包括:使用iPad或平板的應用程式進行交流、語音產生裝置 (Speech Generating Device, SGD) 等。舉例來說,科學家史蒂芬•威廉•霍金 (Stephen William Hawking) 因漸凍人症 (ALS) 緣故,晚年無法發聲,便以語音產生裝置來與他人溝通。隨著科技發展,以人工智慧為基礎的AAC可用來輔助失語症、口吃、構音障礙、表達障礙者等,OTTAA平臺就是以人工智慧為基礎的一種AAC。

圖2:AAC範例:語音手錶是一款穿戴式的語音產生裝置|來源:Wikimedia Commons

 

OTTAA的發展

OTTAA平臺提供數千種象形圖,讓語言障礙者以象形圖完成句子。象形圖是指代表動作、物體、感覺或情緒的圖像(如:屋子的圖案表示「家」)。借助人工智慧技術,OTTAA可根據使用者的環境、日常生活和最常用的短語,向使用者建議最適合的象形圖,促進他們和家人、主要照顧者等對象溝通。OTTAA團隊透過分析使用者建立的180多萬個句子來訓練演算法、提供遊戲來培養孩童的詞彙量,並提供每月報告來追蹤他們的進度。

除了開發此平臺外,團隊也為不便操作滑鼠的身障者開發無障礙套組,搭配平臺使用,例如:滾動和按下 (Scroll & Press) 這項設備提供了三種指令:使用左側大滾輪滾動,會觸發「向下」和「向上」的指令,而右側按鈕可以「按下」,表示選擇,這項設備還可和智慧型手機或個人電腦合併使用。

另一個使用情境是來自11歲的Pule,她是一位第一型脊髓性肌肉萎縮症的女孩。她收到眼動追蹤設備OCUS和通訊設備OTTAA一個多月後,和團隊碰面。她以眼動方式向團隊展示了她這段期間的成果,包括:編輯學校作業的文字檔、瀏覽網站學英語、觀賞串流平臺影片等。Pule也向團隊以文字表示她十分喜歡用眼動方式操作電腦。親眼看到使用者運用OTTAA的情形,讓團隊理解:這項科技不只是提供語言障礙者使用電腦的機會,更拓展了他們和世界的交流,使用者的正面回饋更讓團隊大為振奮(註:使用者影片在參考文獻第2項)。

隨著OTTAA專案的發展,團隊也正積極尋求相關夥伴的合作,如:與身心障礙者倡議組織合作,可探究使用者面臨的需求和挑戰。和語言治療師合作,能獲得AAC臨床方面的見解,確保團隊的應用程式符合治療目標。與研究機構和大學共同研究,則可評估AAC應用程式的功效並探索新的改進方式。

 

輔助科技的發展與建議

OTTAA專案,是以人工智慧為基礎的輔助科技 (Assistive Technology) 案例之一,它的應用情境與技術仍在發展中;OTTAA擁有開源硬體許可證 (OSHWA),鼓勵人們參與改進原始碼。2023年,團隊推出了OTTAA的手機應用程式,幫助更廣大的族群以象形圖溝通。同年,他們取得的重大進展包括:在「預測」功能方面,發展出一種演算法來推薦特定情境脈絡中可能性最高的象形圖。此外,「透過文字指令來生成AI圖像」則可幫助使用者創造自己的象形圖。

圖3: 給說英語者的AAC裝置介面主頁(非本專案)|來源:Wikimedia Commons

根據世界衛生組織WHO (2024) 的定義,輔助科技是輔助產品及其相關系統和服務的總稱。輔助產品有助於維持或改善個人與認知、溝通、聽力、行動能力、自我照顧和視力相關的功能,從而促進人們的健康、福祉、包容和參與。

筆者認為,輔助科技的發展,有助於SDGs第10項「消弭不平等」;而對於身心障礙的兒童來說,輔助科技能改善他們的教育體驗,讓他們獲得更好的「優質教育」(SDGs第4項)。

此外,WHO在2018年發起了全球輔助科技合作 (GATE) 的倡議,GATE社群成員包括輔助科技使用者、服務提供者、政策制定者、捐助者、教育工作者、倡議者、製造商和研究員等,他們分享專業知識及使用輔助科技的經驗,也共同尋求解決方案。WHO和UNICEF於2022年提出了10項關於輔助科技的建議,包括:確保輔助產品安全、有效、價格實惠、將輔助科技納入人道因應措施等。最後,期待各國在開發輔助科技的過程中,能考量這些建議,促進全體人群的永續發展,使每個人都能在可負擔的情況下獲得所需的輔助科技。

圖4:適合低視能使用者的小型閉路電視閱讀器,用來閱讀樂譜|來源:Wikimedia Commons

 


參考文獻

  1. How it works? (2024). OTTAA Project
  2. OCUS - OTTAA Project - El testimonio Anto y su familia. (2024). OTTAA Project.
  3. Zdravkova, K., Krasniqi, V., Dalipi, F., & Ferati, M. (2022). Cutting-edge communication and learning assistive technologies for disabled children: An artificial intelligence perspective. Frontiers in artificial intelligence5, 970430.
  4. OTTAA Project: AI Algorithms for Assistive Communications. (2024). UNICEF.
  5. Comunicacion Aumentativa Graduates From Seed Stage Funding. (2024). UNICEF.
  6. From AI to Hi! Growth Fund graduate OTTAA optimizes AI to ease communication for people with disabilities. (2024). UNICEF.
  7. Augmentative and Alternative Communication (AAC). (2024). American Speech-Language-Hearing Association.
  8. Global Cooperation on Assistive Technology (GATE). (2024). WHO.
  9. Aacpro333. (2024). Speech Watch from Gus Communication Devices Inc. Wikimedia Commons (No changes were made)
  10. Various. (2024). The main page of an AAC device layout for English speakers. Wikimedia Commons (No changes were made)
  11. Muse Score. (2024). Small CCTV reader for low vision users. Wikimedia Commons (No changes were made)
  12. Gianeshwar0201. (2024). Spatial Technology In Future. Wikimedia Commons (No changes were made)
  13. Assistive technology. (2024). WHO
(Visited 83 times, 1 visits today)

分享至
views