為語言障礙者重啟溝通的OTTAA專案
你平常都用什麼方式和他人溝通呢?你知道語言障礙者是如何和他人溝通的嗎?如果加上「科技」元素,你還知道哪些溝通方式呢?你想到的選項,也許都和今天的主題有關。溝通的順暢與否,影響了語言障礙者受教育的品質和社交互動狀態,因此突顯出「科技」角色的重要。本篇文章將帶你瞭解運用人工智慧技術的OTTAA專案如何幫助語言障礙人士和他人溝通、溝通相關的概念、輔助科技的發展和建議、輔助科技和永續的關聯。
撰文|Fin
OTTAA專案緣起
OTTAA專案由一對兄弟和各領域成員組成,這對兄弟的祖母Lidia由於罹患阿茲海默症,無法和他們溝通,因此他們創立了OTTAA平臺。此平臺是一種協助語言障礙人士的「擴大及替代性輔助溝通系統」(Augmentative and Alternative Communication. AAC),能改善語言障礙者的生活方式、幫助他們重獲自主權。2016年開始的OTTAA專案,後來獲得聯合國兒童基金會創投 (UNICEF Venture Fund) 的資助,開始測試新市場,現在平臺的使用者包含厄瓜多、瓜地馬拉、薩爾瓦多等國家,目前繼續整合GPT技術,以實現進階的預測功能和創造句子功能。
什麼是AAC?
根據美國聽語學會 (ASHA, 2024) 的定義,AAC指的是談話以外的所有溝通方式。所有年齡層的人若在語言方面有困難,都可以使用AAC。擴大 (Augmentative) 指的是增添到此人的言語中,而替代 (Alternative),則是代替言語。AAC有不同類型,非技術和低技術類型包括:手勢、臉部表情、寫作、繪畫、指著照片、圖片或文字等;高科技類型則包括:使用iPad或平板的應用程式進行交流、語音產生裝置 (Speech Generating Device, SGD) 等。舉例來說,科學家史蒂芬•威廉•霍金 (Stephen William Hawking) 因漸凍人症 (ALS) 緣故,晚年無法發聲,便以語音產生裝置來與他人溝通。隨著科技發展,以人工智慧為基礎的AAC可用來輔助失語症、口吃、構音障礙、表達障礙者等,OTTAA平臺就是以人工智慧為基礎的一種AAC。
OTTAA的發展
OTTAA平臺提供數千種象形圖,讓語言障礙者以象形圖完成句子。象形圖是指代表動作、物體、感覺或情緒的圖像(如:屋子的圖案表示「家」)。借助人工智慧技術,OTTAA可根據使用者的環境、日常生活和最常用的短語,向使用者建議最適合的象形圖,促進他們和家人、主要照顧者等對象溝通。OTTAA團隊透過分析使用者建立的180多萬個句子來訓練演算法、提供遊戲來培養孩童的詞彙量,並提供每月報告來追蹤他們的進度。
除了開發此平臺外,團隊也為不便操作滑鼠的身障者開發無障礙套組,搭配平臺使用,例如:滾動和按下 (Scroll & Press) 這項設備提供了三種指令:使用左側大滾輪滾動,會觸發「向下」和「向上」的指令,而右側按鈕可以「按下」,表示選擇,這項設備還可和智慧型手機或個人電腦合併使用。
另一個使用情境是來自11歲的Pule,她是一位第一型脊髓性肌肉萎縮症的女孩。她收到眼動追蹤設備OCUS和通訊設備OTTAA一個多月後,和團隊碰面。她以眼動方式向團隊展示了她這段期間的成果,包括:編輯學校作業的文字檔、瀏覽網站學英語、觀賞串流平臺影片等。Pule也向團隊以文字表示她十分喜歡用眼動方式操作電腦。親眼看到使用者運用OTTAA的情形,讓團隊理解:這項科技不只是提供語言障礙者使用電腦的機會,更拓展了他們和世界的交流,使用者的正面回饋更讓團隊大為振奮(註:使用者影片在參考文獻第2項)。
隨著OTTAA專案的發展,團隊也正積極尋求相關夥伴的合作,如:與身心障礙者倡議組織合作,可探究使用者面臨的需求和挑戰。和語言治療師合作,能獲得AAC臨床方面的見解,確保團隊的應用程式符合治療目標。與研究機構和大學共同研究,則可評估AAC應用程式的功效並探索新的改進方式。
輔助科技的發展與建議
OTTAA專案,是以人工智慧為基礎的輔助科技 (Assistive Technology) 案例之一,它的應用情境與技術仍在發展中;OTTAA擁有開源硬體許可證 (OSHWA),鼓勵人們參與改進原始碼。2023年,團隊推出了OTTAA的手機應用程式,幫助更廣大的族群以象形圖溝通。同年,他們取得的重大進展包括:在「預測」功能方面,發展出一種演算法來推薦特定情境脈絡中可能性最高的象形圖。此外,「透過文字指令來生成AI圖像」則可幫助使用者創造自己的象形圖。
根據世界衛生組織WHO (2024) 的定義,輔助科技是輔助產品及其相關系統和服務的總稱。輔助產品有助於維持或改善個人與認知、溝通、聽力、行動能力、自我照顧和視力相關的功能,從而促進人們的健康、福祉、包容和參與。
筆者認為,輔助科技的發展,有助於SDGs第10項「消弭不平等」;而對於身心障礙的兒童來說,輔助科技能改善他們的教育體驗,讓他們獲得更好的「優質教育」(SDGs第4項)。
此外,WHO在2018年發起了全球輔助科技合作 (GATE) 的倡議,GATE社群成員包括輔助科技使用者、服務提供者、政策制定者、捐助者、教育工作者、倡議者、製造商和研究員等,他們分享專業知識及使用輔助科技的經驗,也共同尋求解決方案。WHO和UNICEF於2022年提出了10項關於輔助科技的建議,包括:確保輔助產品安全、有效、價格實惠、將輔助科技納入人道因應措施等。最後,期待各國在開發輔助科技的過程中,能考量這些建議,促進全體人群的永續發展,使每個人都能在可負擔的情況下獲得所需的輔助科技。
參考文獻
- How it works? (2024). OTTAA Project
- OCUS - OTTAA Project - El testimonio Anto y su familia. (2024). OTTAA Project.
- Zdravkova, K., Krasniqi, V., Dalipi, F., & Ferati, M. (2022). Cutting-edge communication and learning assistive technologies for disabled children: An artificial intelligence perspective. Frontiers in artificial intelligence, 5, 970430.
- OTTAA Project: AI Algorithms for Assistive Communications. (2024). UNICEF.
- Comunicacion Aumentativa Graduates From Seed Stage Funding. (2024). UNICEF.
- From AI to Hi! Growth Fund graduate OTTAA optimizes AI to ease communication for people with disabilities. (2024). UNICEF.
- Augmentative and Alternative Communication (AAC). (2024). American Speech-Language-Hearing Association.
- Global Cooperation on Assistive Technology (GATE). (2024). WHO.
- Aacpro333. (2024). Speech Watch from Gus Communication Devices Inc. Wikimedia Commons (No changes were made)
- Various. (2024). The main page of an AAC device layout for English speakers. Wikimedia Commons (No changes were made)
- Muse Score. (2024). Small CCTV reader for low vision users. Wikimedia Commons (No changes were made)
- Gianeshwar0201. (2024). Spatial Technology In Future. Wikimedia Commons (No changes were made)
- Assistive technology. (2024). WHO