子計畫二 /
數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣
113 年 1 月份報導(一)
國立臺北大學張玉山老師團隊1月份活動(一)
一、線上說明會(子計畫一、二、四)
2024年1月4日 12:30-14:30
舉辦子計畫一、二及子計畫四的知情同意說明會與錄音系統操作說明會:第一部分,先由林昭吟老師進行子一與子四的知情同意書說明,詳細說明本計畫的內容與研究參與者的權益。接著,再由江振宇老師負責說明子計畫一Voicebank(https://voicebank.ce.ntpu.edu.tw/)錄音系統的操作,如何使用網頁進行錄音,當錄音時無法念較長的語句,可以把語料庫(一)、(二),改成錄語料庫(十一)、(十二),希望能盡快完成語料庫(一)至(八)錄製,預計錄完耗時約2小時左右。語料庫(九)至(十)是中英摻雜的語句,我們也歡迎有興趣的人員加入錄音。第二部分,一樣由林昭吟老師負責介紹子二與子四的知情同意書內容,並詳細說明本計畫的內容與研究參與者的權益。接著,再由張玉山院長和助理林佑宸負責說明子計畫二ezTalk(https://120.126.151.159:56432)錄音系統的操作,錄音時可以多收幾十個或幾百個句子,盡量不要同一個句子重複收音超過50次,希望能多錄整批語句,這樣才會更有利於訓練個人的辨識模型。
參與者也都積極回覆,詢問錄音上的問題,大家都表示非常有意願參與本計畫,衷心感謝大家對我們計畫的支持和參與。
二、子計畫二開始模型訓練
子計畫二開始將訓練好的模型給使用者使用,連結影片中的這位使用者是經過團隊的北醫復健科語言治療師判定,其語言清析度只有2(0 = normal; 1=mild; 2=moderate; 3=marked; 4=severely deviant),經過我們的模型辨識後可以清楚的辨識及翻譯。未來期望更多的人透過我們的技術可以清楚的翻譯,讓這些朋友可以跟別人自由的溝通,減少語言溝通障礙。視頻連結:https://tw.psee.ly/5kzsck
三、計畫參與者的故事分享
我們想要與大家分享一位女士的故事,她五歲時罹患腦膜炎,但她卻在這趟人生的旅途中,展現了充滿堅韌與愛的人生態度。未來,這位女士期望透過AI科技所研發的溝通輔具,能夠無障礙地協助她分享自己的照護經驗。
這位女士因罹患了腦膜炎,導致她左側肢體障礙和口齒不清的後遺症。即使在家人的照顧和鼓勵下成長,卻也從小就承受來自外界的歧視,讓她極度缺乏自信和充滿自卑感。畢業於高中商業科後,她踏上北上就職之路,也在這段時光中遇見了給予她極大保護和照顧的先生,成為她生活中的支柱。因此,她在先生的呵護照顧下,就像一隻無尾熊一樣,過著幸福的生活。然而,當她51歲時,她的先生罹患了「年輕型失智症」,那時先生才54歲。兩人的生活環境瞬間天崩地裂,她從原本被照顧者的角色轉變為主要的照顧者。幸運的是,她找到了Young記憶會館,得到了很多協助,讓她重啟對生活和對人生的態度。她也開始拍攝影片宣導「年輕型失智症」的照護,在這個過程中找到了自己的人生意義。
儘管她的先生目前已進入重度臥床階段,她依然想盡自己微薄的力量,為弱勢族群奉獻心力。受制於口齒不清的困擾,她渴望找到一種溝通方法,能夠更清楚地表達自己的照護經驗,給陷入困境的人一些幫助和希望。於是透過腦性麻痺協會的介紹,她找到了我們的計畫,希望能透過我們計畫開發的溝通輔具,分享自己的照護經驗,激勵那些正在面臨困難的人,讓他們知道生命中仍然有無盡的可能性和希望。
這段故事讓我們看見一位勇敢堅強的女士,透過困境找到了堅持和奮鬥的力量。儘管過程中充滿挑戰,困難重重,但我們希望透過AI科技技術,能研發出有效溝通的輔具,可以更有效地幫助語言障礙者克服溝通上的困難,我們大家一起努力,為弱勢族群奉獻心力。
四、期末檢討餐會
113/01/22(一)舉辦期末檢討餐會,主要討論的內容包括檢視目前工作進度與討論未來修正方向。
- 計畫期中報告摘要:團隊討論了目前報告進度,包括前言、研究目的、文獻探討、研究方法、和預期結果等。
- 實際進度:我們的實際進度比計畫書規劃超前,已提前完成可能延遲的任務。在餐會中,我們也討論了已達成的內容、正在進行中的工作,以及即將展開的下一步工作。
- 成果分析:我們對於媒體、參與人數、關懷人數、收音人數、收音數量、社會觸及率、follow人數等成果,也進行了討論評估,並探究如何凸顯這些數據對計畫的影響和效益。
- 合作成果:醫療單位、社福團體、大專院校、地方政府等合作單位對本計畫的幫助不可或缺,我們也討論了和夥伴共同達成的具體成果,並探討如何深化夥伴關係、延續對計畫的裨益。
- 問題與解決方法:在執行計畫期間,我們曾遇到問題,並在當下嘗試方法解決,在餐會中,我們也討論了解方的有效性,以及如何應對未來可能遇到的問題。
- 未來發展方向:最後,我們也提出未來計畫的發展方向,包括深化的研究、改進執行方法,如何將影響力擴展到其他領域,以及和其他研究團隊或產業合作的可能性。我們期待能在未來持續發展這個輔具,透過與相關單位的合作機會和補助方案,以加強計畫的可持續性。
五、第一場焦點團體座談會議(新北市輔具中心)
會議時間:2024年1月24日(三)上午9:30至12:30
會議地點:新北市蘆洲區集賢路245號9F
主辦:子計畫四共同主持人 林昭吟教授
主持人:張玉山院長
記錄:周家瑜助理、李新潔助理
由張玉山院長擔任主持人開始接下來的會議,首先以總計畫辦公室協助本計畫拍攝的影片做開場。影片順序為子計畫二、一、三。子計畫二部分中,由張院長簡介相關內容,說明子計畫二的錄音系統ezTalk的使用,說明為什麼病友要使用這個語音錄製,以及如何使用此系統,例如:將我們想說的文字輸入系統,系統可以將文字轉換成語音。子計畫一內容則由江振宇老師介紹相關內容,以及過去投入漸凍人回聲計畫,說明當時直接到病友家中協助錄音的過程,以及VoiceBank的網頁操作與錄音狀況。子計畫三由戴敏育老師的助理廖文宣同學介紹,涵括包容溝通支持多模態跨語言任務導向的對話系統,多模態為文字、聲音、影像的選擇,可以用不同的方式進行輸出,希望可以整合不同模態是本計畫的目標,也請觀眾透過加入本計畫官方LINE,實際操作和使用這個功能。
在交流討論的過程中,藉由新北輔具資源中心所提供的意見,本計畫也更了解未來可以發展的方向,像是楊忠一主任回饋實務方面,電腦使用語音溝通軟體政府補助一萬至兩萬,提供情境溝通,並至少提供1000個溝通圖卡功能,如AAC(增強和替代性溝通)輔具,障礙者更需要的是把現有的技術拿來使用,主任認為目前技術已經可以應付,但在臺灣仍有許多可以努力的面向;主任也分享了過去所認識的病友,透過治療師從旁協助確認其語意,讓病友開始學習新的事物,如學習使用電動輪椅,而開始改善了他的生活。另外,王允駿語言治療師也回饋說,本計畫在做的輔具,聽起來口語與非口語障礙者都會使用到,障礙者之間差異性都很大,非口語障礙者是完全說不出話,雖然目前我們計畫主要還是以非口語障礙者為主,但在語言治療方面仍較少專屬於口語障礙者,因此認為本計畫的可創性、發展性很強,也給予我們支持與鼓勵。
子計畫四的林昭吟老師亦提出,是否有提供給照顧者的輔具呢?可能有來自於機構、家庭中的照顧者,也希望提供給照顧者輔具的使用。楊忠一主任回饋,很多照顧者對於障礙的知能並不足夠,前端會透過語言治療師做評估後,可能還需要做整合性的系統,因每個人對認知功能的差異,會需要用到不一樣的整合方法,如果需要用到圖像整合的輔具溝通板,希望內容是涵蓋圖像、文字等多功能的整合系統。座談會與會人員包括新北輔具治療中心楊忠一主任、徐麒晏督導、余虹督導、彭嘉惠督導、王允駿語言治療師,以及聲帆股份有限公司創辦人張文陽先生,共同參與討論。楊忠一主任以其豐富的經驗,深入探討輔具治療的實際應用情境;徐麒晏督導、余虹督導、彭嘉惠督導則分別從不同專業領域提供多元化的見解;王允駿語言治療師則透過其專業角度,提供了有價值的語言治療方面的經驗。張文陽先生與江老師長期的合作更深入彼此的了解,分享錄音系統技術特點和運作模式,並協助如何提升輔具的性能和使用體驗。整個會議過程都呈現相當熱烈的氛圍,每一位專業人員都樂於分享豐富的實務經驗,並提供寶貴的建議,讓我們受益匪淺。
這次座談會,不僅促進本計畫與專業實務界的交流,凝聚了專業人才,還為我們提供了多元且具體的建議。這些討論的成果為本計畫的實踐提供許多寶貴的參考意見,使我們更具體地了解障礙者的需求,進一步改進和精進計畫的執行方針,對未來的發展方向產生深遠的影響。希望透過本計畫可以讓障礙者的社會參與度增加,且在日常生活中也能自由的與他人交流。最後,誠摯感謝各位專業人士撥冗參加,並慷慨分享寶貴的建議。我們也會持續不懈地努力,使本計畫的實踐效果更加卓越,對社會產生更深遠的影響。期許能夠透過這樣的努力,讓障礙者在社會中得到更廣泛的支持與理解。