數位支持、溝通無礙:
AI科技協助語言障礙者溝通輔具之研發、支持與推廣
Digital Support, Unimpeded Communication: The Development, Support and Promotion of AI-assisted Communication Assistive Devices for Speech Impairment
Digital Support, Unimpeded Communication: The Development, Support and Promotion of AI-assisted Communication Assistive Devices for Speech Impairment
關鍵詞:數位支持, 溝通, 人工智能, 吶語症, 漸凍人, 語音辨識, 自然語言處理
Keywords: Digital Support, Communication, Artificial Intelligence, Dysarthria, People with Gradual Freezing, Speech Recognition, Natural Language Processing
Yahoo奇摩新聞
【記者王志誠、周貞伶/新北報導】
台北大學以包容為導向之科技計畫 獲國科會核定
台北大學獲國科會核定的「以包容為導向之科技計畫」已成為全校師生的共同榮耀。這項計畫名為「數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣計畫」,獲得為期三年的核定,國科會於一一二年度公開徵求重大計畫,期望能夠以「包容」為核心概念,提出創新的社會實作計畫,並利用科技積極幫助被科技排除在外的群體或個人,確保他們能夠享有社會權益。
台北大學由電資學院張玉山院長擔任整合型計畫主持人,邀請電資學院通訊系江振宇副教授、商學院資管所戴敏育副教授、社科院社工系林昭吟主任,以及台北醫學大學復健科康峻宏院長共同組成團隊提出申請。經過初審、複審,最後在國科會親自簡報中脫穎而出,成為十一件獲得補助的計畫之一。
張玉山表示,溝通是人類的本能,然而對於患有語言障礙,例如漸凍人、腦性麻痺及其他特殊原因的人來說,溝通卻成為一種困難,也使他們難以融入社會。這些語言障礙者常常因為溝通上的困難而感到恐懼,不僅影響工作,還使他們避免與他人互動,進一步與社會疏離。因此,計畫的目標是利用研究團隊多年的研究成果,結合數位科技和人工智能(AI)技術,針對語言障礙者開發溝通輔具,以幫助他們順利與他人溝通。這項包容科技計畫分為四個子計畫,由通訊系江振宇副教授、電資學院張玉山院長、資管所戴敏育副教授和社工系林昭吟主任分別負責。
此整合型計畫是台北大學罕見獲得國科會補助的大型計畫之一,團隊成員均來自校內教師。顯示長期以來對跨領域和跨專業的特色領域計畫的支持已經取得重要成果。這項計畫的成功,將為語言障礙者提供更多溝通工具和支持,幫助他們克服溝通上的障礙,融入社會,並發揮他們的潛能。
校方說明,隨著「數位支持、溝通無礙」計畫的啟動,將繼續在科技領域發揮創新力量,為社會帶來積極的影響。未來三年的計畫期間中,團隊將不斷努力研究和改進溝通輔具,並積極推廣這些技術,讓更多的語言障礙者受益。相信透過科技的力量,可以共同打破溝通障礙,實現包容和平等的社會。
資料摘自:https://tw.stock.yahoo.com/....../%E5%8F%B0%E5%8C%97......
本計畫已開始招募研究參與者,請有意願參與收音計畫的研究參與者,填寫報名資料,請大家多多幫忙推廣宣傳本資訊,非常感謝!
#【徵求對象】、【研究方法】及【報名方式】詳如圖片所示
112年6月19日於國立臺北大學音律電機資訊大樓3F01,進行第一次工作會議,討論計畫進展及工作安排,出席人員有張玉山教授、江振宇副教授、戴敏育副教授、林昭吟教授。
對於患有語言障礙(如漸凍人、腦性麻痺及其他特殊原因),溝通成為一種困難,也使他們難以融入社會。這些語言障礙者常常因為溝通上的困難而感到恐懼,不僅影響工作,還使他們避免與他人互動,進一步與社會疏離。「ezTalk」提供了一種解決的可能性。影片中展示了一些初步的錄音效果:
4.播放時會自動選擇第一順位的文句(也可以自己選擇想要播放的文句)。
112年6月28日於國立臺北大學音律電機資訊大樓3F03會議室,進行第二次工作討論會議,討論國科會6月份的計畫執行情形及報告內容等相關事宜。出席人員有張玉山教授、江振宇副教授、戴敏育副教授、林昭吟教授、林予安助理教授。
112年6月30日張玉山院長、林昭吟主任、江振宇老師去拜訪陽光基金會,洽談合作之協助事宜,收穫良多!
112年7月15日(六)至高雄出席無礙玩家會員大會,順便說明本計劃之目的及推廣本計劃之成果,當場有很多社福團體參與,也受到這些團體,會員之回響及高雄市社會局的正面回應,希望未來有更多的合作。
112年7月17日(一)拜訪漸凍人協會洽談計畫協助事宜,與理事長、秘書長及相關同仁相談甚歡,而且也激發出很多不錯的想法,理事長非常有創見,也對於本計畫非常支持,謝謝!
112年7月25日(一)下午拜訪新北市政府社會局身心障礙福利科及輔具中心同仁,介紹本團隊語言辨識軟體及功能,希望能藉由公部門而連結到更多有此方面需求的朋友。
112年7月24日(一)下午拜訪行無礙協會,並和一位語障者討論語音辨識軟體的運用,也歡迎他加入協助我們收音及試用軟體。
【漢聲廣播電臺專訪】
112年8月1日(一)張玉山院長和學生接受漢聲廣播電台專訪,談談我們包容導向科技計畫的構音障礙系統的進展及現展Demo我們的使用者介面,學生直接以APP接受訪問並且回答,在訪綱有事前準備之下,大部份的回答都算順利,少部份系統辨識錯誤,這也算是一種推廣吧!
語言,是我們用來建立關係、連絡感情、傳達與交換訊息的重要工具💪
但是❗️❗️有一群人,因為疾病(吶語症、漸凍症)的關係,他們的話語凝固在時間的冰層裡,某天因著不再能夠發聲或者口齒不清,而無法順利與人溝通交流,深深影響到他們的生活、工作以及情感網絡。
🌸包容科技計畫的臺北大學團隊透過建立科技溝通輔助工具,幫助他們鋪蓋與這個世界溝通的橋樑,促使他們能夠持續與親人維持情感交流,能夠持續表達自己的需求、傳遞自己的思想🌸
我們期待弱勢族群因著科技得到生活的改善,得到身而為人應得的尊嚴和接納🎁🎁並非只有錢能放進銀行裡,我們的團隊把聲音也放進去了,在裡頭儲蓄無限的希望與包容☺️☺️
語音銀行👉https://voicebank.ce.ntpu.edu.tw/index.php
資料取自:包容科技(fb粉專)https://www.facebook.com/2022ttfi
45度角的天空
播出時間: 8 月 13 日(日)AM11:00~12:00
語言障礙者之科技輔具研發 —台北大學資工系黃瀚勳 計畫主持人 張玉山老師
對與口語能力較弱的障礙者,與人的溝通上相對具有困難度,在我們提及障礙者為自己發聲、為生活倡議的場合中,語言障礙者卻是有口難言,難以充分發表自己的主張。瀚勳以自身的障礙經驗,結合資工專長,在教授的協助下研發出,能將自己語音轉為文字、再由系統代為朗讀的APP,以科技協助發言的模式,未來將讓語言障礙者溝通無礙,然而目前的研發,需要搜集更多聲音資料。今天先讓我們一起來認識這套軟體,以及研發的過程,節目中,瀚勳更直接使用這套軟體接受採訪。
📻馬上收聽 https://bit.ly/fmvoh
🎧聽精彩的 https://bit.ly/3nyJhYU
🎧訂閱Podcast https://bit.ly/3JVr5jZ
📝主持人留言板 https://bit.ly/40rS91e
本節目為國家人權委員會廣告 社團法人行無礙聯盟 漢聲廣播電臺聯合製播
資料取自:余秀芷(fb專頁)https://www.facebook.com/sleeveyu
112 年8月15(星期二)一早拜訪罕見疾病基金會,由陳執行長與楊副執行長親自接待,研究團隊則由主持人張玉山教授說明本計畫內容,並深入介紹及示範子計畫二的語音辨識技術。從使用者角度,只要能上網進入子計畫二的系統,便可以開始收錄聲音,不限手機、桌機、筆電或平板等裝置,也不限何時何地可以收音。有些罕見疾病病友有溝通障礙問題,希望未來能透過這樣的技術開發,協助他們較自由地表達自己的想法並與他人溝通。研究團隊與基金會雙方相談甚歡,會後罕病基金會也鼓勵參與此計畫的博碩士生助理們申請罕見疾病博碩士論文獎助,希望有更多博碩士生(不限學門領域)可以投入罕病議題的研究。
大家好,這是子計畫二(ezTalk)錄音系統操作的影片介紹,共有8支(含一支整合影片),請有需要的人,可以到本計畫的YouTube粉專觀看影片,謝謝!
介面登入方式及系統左側【翻譯】功能列表的(打字功能)介紹
影片鏈接:https://youtu.be/xBu5Nee2R_E
系統左側【翻譯】功能列表的(語音功能)介紹
影片鏈接:https://youtu.be/uZ1qABTFvng
系統左側【資料蒐集】功能列表的(單音錄音功能)介紹
影片鏈接:https://youtu.be/UdzTz4k0mhE
系統左側【資料蒐集】功能列表的(單句錄音功能)介紹
影片鏈接:https://youtu.be/3--TS2r2tWo
系統左側【資料蒐集】功能列表的(整批錄音功能)介紹
影片鏈接:https://youtu.be/5TLVvEssbG8
系統左側【錄音現況】功能列表的(單音和句子功能)介紹
影片鏈接:https://youtu.be/9dAI0H4CPQw
系統左側【檔案資料庫】功能列表介紹
影片鏈接:https://youtu.be/iQL36YJ1Jt4
上述系統使用功能的完整介紹版本
112年8月10日(星期四)中午12時 ,以google meet連線舉辦線上第一次說明會,主要討論子計畫二的收音系統(ezTalk)的操作說明。會議討論非常順利,個案參與者也有積極提問許多關於系統使用上的問題,大家對這個系統抱有很高的期待,會後也有繼續在line群組內延伸討論系統收音的問題。
112年8月23日(星期三)上午10:30-12:00 ,以google meet連線舉辦線上第二次說明會,主要是針對新加入子計畫二的三位成員進行知情同意書以及收音系統(ezTalk)操作的說明,也有之前的研究參與者來一起參加,再聽一遍。會議討論非常順利,目前大家對這個系統抱有很高的期待,會後也有繼續在line群組內延伸討論系統收音的問題。
112/09/07上午9:00 ,以google meet線上會議方式舉行第四次工作討論會議,與會人員包含張玉山教授、林昭吟教授、江振宇副教授、戴敏育副教授、廖文瑄、徐尚祺、李新潔等。
主要討論的議題有:
1.為鼓勵各收案者積極參與收音,子計劃二的收案費用擬修正為每字1元。
2.拍攝影片之肖像權使用同意書確認。
3.「包容科技計畫」7-9月(第三季)計劃執行報告。
4.建立與研究參與者關懷系統。
20230907進行子計畫一線上說明會,除了簡要說明知情同意書內容,也展示如何線上收音,將寶貴的聲音收到語音資料庫中。
20230912(星期二)下午至臺北榮總拜訪中華民國無喉者協會,與會者包含朱本元理事長、張其忠副秘書長、王秘書長、張院長、江振宇副教授、林昭吟教授、尚棋助理、家瑜助理等人。
由朱醫師介紹協會的成立,與病友生理特徵與復健後的發聲方式,做詳細的介紹,以及張副秘書長以自身的經驗分享食道語發聲法;張院長介紹有關語音辨識的計畫,以及江振宇副教授介紹過去所做的語音相關研究計畫之經驗,雙方討論熱絡,激發出許多的想法,協會也對於本計劃非常支持、反應很好!
2023/9/12 (星期二)上午前往拜訪八里教養院,由計畫主持人張教授向院生們展示子計畫二的收音系統,說明如何運用語音辨識系統,將輸入的聲音,正確的轉換成句子,並現場操作如何錄音。院生們對於收音感到好奇,甚至有幾位院生現場就表現出積極的意願想參與收音。教養院也表示或許可以把收音的動作當作課程,鼓勵院生練習說話!
【活動公告】
本計畫與臺北大學社科院USR合辦之推廣活動,對AI科技智慧語音系統感興趣者,歡迎蒞臨參加。
主題:高齡者智慧語音工坊
主持人:林昭吟教授(國立臺北大學社會工作學系)
講者:江振宇副教授(國立臺北大學通訊工程學系)、 徐尚祺專任助理
地點:三峽北大社區長照機構-日照教室(新北市三峽區學成路396 號2樓之1)
時間:112年10月18日(14:00-15:00)
【高齡者智慧語音工坊】活動圓滿結束了,感謝所有的參與者。也感謝大家在本次一些事件中給予我們的建議、意見與鼓勵,我們會繼續努力,讓之後的每一次活動都能更好。
【活動內容】
1.江振宇老師介紹子計畫一:介紹以Voice Bank如何支援漸凍症病友及構音障礙,播放示範影片展示給長輩看,讓長輩知道漸凍症病友原來能夠透過眼球控制滑鼠,選擇想說的話,甚至還能夠使用合成技術,讓漸凍症病友能夠用自己的聲音說話,長輩們都非常感興趣!
2.徐尚祺助理介紹Chatgpt讓長輩認識這個討論度極高的聊天機器人,讓他們跟Chatgpt聊天互動,參考Chatgpt給出的食譜、詢問Chatgpt保持快樂健康的方法等,甚至有長輩希望能跟Chatgpt一起唱歌,接著介紹我們利用Chatgpt API 來串接Line官方帳號,讓名稱為aiitntpu的line帳號能回答有關漸凍症與構音障礙者的常見問答,對於這樣的新科技,長輩也期待未來有更全面、更多功能的機器人能夠出現,幫助語音障礙者能自主地與他人溝通或互動。
大家好,本計畫開始招募第二階段研究參與者,請有意願參與收音計畫的研究參與者,填寫報名資料,請大家多多幫忙推廣宣傳本資訊,非常感謝!
#【徵求對象】、【研究方法】及【報名方式】詳如圖片所示
報名表單網址:https://forms.gle/HFsLXpzX5LaxJ63x6
2023年11月07日(二)進行子計畫一第二場線上說明會:
今天首先由昭吟老師說明子計畫一的知情同意。
再由振宇老師講解如何使用VoiceBank 申請帳號,並進行錄音的說明。
這次參與者都是一般人士(非構音障礙者),大家都表示有理解,以及有想要參與的意願!
112年11月8日(三)舉辦「子計畫一學生受試者知情同意說明會」
今天於臺北大學校內舉行子計畫一的知情同意說明會,由昭吟老師開頭介紹子計畫一知情同意的內容,讓同學了解到計畫的內容與自身權益。
第二部分,再由振宇老師介紹漸凍人應用語音系統的狀況,讓同學理解語音辨識的功能,以及捐獻語音帶來的影響。
最後,介紹語音錄製的網站voicebank 的使用,讓同學能夠實際操作以便後續錄製語音。
同學們反應熱烈且很投入,準備加入錄製語音的行列提供語料。
2023年11月14日(二)下午舉辦「子計畫二第二次收音說明會」
由昭吟老師主持會議,並由張玉山院長說明有關錄音的步驟與相關問題:
1. 收音是透過網頁的方式,方便支持多元使用(平板、手機、電腦)
2. 進入網站https://120.126.151.159:56432/
3. 進入網站後有「加密」確保資訊安全,瀏覽器會警示一下,點選「進階」選項及「仍要參訪此網站」選項,即可進入網站。
4. 進入網站後使用「google帳號」註冊ezTalk,不會收集個資。
5. 點選左上方選項欄,展示收音介面、轉譯介面,並點選錄音鍵開始錄音,中文音共395個音。
展示收音介面:
單音錄音:一次一個音,依中文的語音順序錄音
單句錄音:一次一個句子,可依個人喜好收錄
整批錄音:可依個人喜好設計一個收音的語句檔,依序收音
展示轉譯介面:
整句串接:適用於無法一次性講完一整句話者或打字速度較慢者,只能講簡短的字或打較少字,透過前後串接的方式,串出一整個句子。
歷史語句:適用於無法一次性講完一句整話者,透過簡短的字,選擇曾經講過的語句。
6. 點選「刪除前次錄音檔鍵」,也可以重新錄音,錄製新的語音句子。
7. 錄音字數達一萬筆以上就可以開始做語音模型,錄越多的音,辨識度越準。
8. 若還沒有語音模型前,可以先做聲音的播出。
9. 錄音期限目前第一季是到2024年4月30日,若後續還有第二季也可以繼續錄音。
10. 使用同一台NB,可同時收錄不同的人聲音,只要用個別「google帳號」登入個人所屬的ezTalk即可。
2023年11月21日(二)下午拜訪中華民國腦性麻痺協會:
今天先由腦麻協會督導簡介腦性麻痺者的特質,以及中華民國腦性麻痺協會的規模與會員人數等內容。
接下來,由張院長簡介本計畫的內容,並以學生的例子為例,介紹子計畫二的ezTalk,將其語料內容轉換成清楚的語音內容,希望能用AI技術幫忙構音障礙者,未來期望能夠讓構音障礙者能free talk 方式與他人交流。
第二部分介紹使用google帳號註冊ezTalk網頁,以及錄製語音的操作方法,讓構音障礙者在有網路的情況下,利用平板和手機,都能夠完成錄音,並拿到語音錄製的酬金。
接著由江老師介紹子計畫一的語音系統的註冊與使用方式,展示漸凍人回聲計劃過去曾經錄製語音實際的案例,藉由文字轉換成能夠使用的語音,以保存個人語音特色。
最後,由昭吟老師簡單說明知情同意書的內容,並總結了子計畫一為語音錄製,子計畫二為語音辨識,子計畫四為生活品質調查的計畫,子計畫三則是做計畫網頁前後端的技術支援。
腦性麻痺協會的人員也提出對本計畫的一些疑問,包括期望錄音人數、酬金、障礙程度、子計畫一與二的差異、後續舉辦知情同意書說明會的時間,以及錄音是否要自行發想語料等提問。
老師們也回覆了相關問題,目前沒有限制錄音人數和錄音酬金,招募到3-4位參與者就可以舉辦說明會。
子計畫一:有一般錄音者和構音障礙者,有提供語料庫給錄音者。
子計畫二:主要針對構音障礙者,可以由我們提供語料模板,也可以自己建構常用的語料庫。
腦性麻痺協會也對本計畫表達高度的興趣,在了解之後也預計在協會中幫忙進行推廣,讓更多人能夠認識本計劃,也非常感謝協會提供這個推廣的機會。
2023年12月6日(三)下午拜訪中華民國腦性麻痺協會:
首先由張院長展示學生和學生姐姐,以及個案參與者的錄音檔案。目前已達成7-8成的辨識度,有部分辨識不出的聲音,需要做個別修改。我們期望未來這些朋友可以自由跟別人溝通。
因每個人的清晰度都不一樣,所以剛開始語料不多的時候,希望可以講清楚講慢一些,這樣辨識度才會更清楚,我們也是靠收音,才能建立個人模型,收越多音模型越準確,電腦也是靠演算法演算,期望未來是可以整句講完,直接播出來,大家都能聽得懂。
過程中腦麻協會也積極參與,並提出一些問題:
問:現在因為個資安全,有被盜用的問題,這些朋友的聲音很容易辨識,若被盜用,很容易變成犯罪的工具,請問有什麼保障?
回覆:我們的錄音網頁都不記錄個資,用google帳密登入即可,聲音都是存在網頁後端,不會有洩密的疑慮。
問:使用的期限,最後會不會有什麼收費的問題?
回覆:只要是在國科會補助案的計畫期間內可以持續使用,計畫結束後要看國科會的安排,最後是否會走向商業化,這部分我們也不敢保證。
未來期望能把模型弄成App,讓在計畫執行期間內有協助收音的朋友,都能走向個人化模型。
感謝大家在現場試用錄音網站,展現出大家對於共同目標的熱情,讓我們一起努力,希望這個計畫能有更多的參與者,能激勵更多人投入進來。
最後,感謝腦性麻痺協會的積極參與和堅定支持,你們的參與為我們這個計畫注入了更多正能量,你們的支持是激勵我們繼續努力、不斷進步的動力,希望能與大家攜手合作,讓計畫更加順利進行!
112/12/12(二)下午,以google meet線上會議方式舉辦第五次工作討論會議,與會人員包含張玉山教授、林昭吟教授、江振宇副教授、戴敏育副教授、李新潔助理等。
主要討論的內容有:
1.包容計畫的第四季季報告。
2.112年執行之績效報告書。
3.提議每個月固定時間舉辦知情同意書和錄音系統使用說明會,並將時間公佈於fb上,方便讓參與者知道具體說明的時間。
4.子一江振宇老師和子二張玉山老師,可以合作來辨識參與者的語音,以及語音文本的設計。
112年12月16日計畫主持人張玉山教授受邀參加「台中市恩典自立生活關懷協會成立大會」,障礙者自立生活的問念起源於美國加州柏克萊大學,期望校園中提供完善的環境給障礙者可以自立自主的學習環境。而在社會上這些障礙者如何自立生活,有賴於政府、社會提供其生活自立自主的環境。
在本計畫主要是可以讓語障者可以透過自己的想法及意願順利的與人、社會、甚至政府溝通,達到其自立生活的目的。在此成立大會中除與會的會員外,也有各界人士到場支持,包含台北市自立生活關懷協會外,還有一些政治人物及民意代表。另外張玉山教授亦受邀擔任貴賓並於會中致詞,除恭喜大會順利成立外,亦宣傳國科會包含導向科技計畫之目的及本計畫團隊,期望透過科技建構包容的社會環境,提供符合障礙者之自立生活的環境。
2024年1月4日 12:30-14:30
舉辦子計畫一、子計畫二及子計畫四的知情同意說明會與錄音系統操作說明會:
第一部分,先由林昭吟老師進行子一與子四的知情同意書說明,詳細說明本計畫的內容與研究參與者的權益。接著,再由江振宇老師負責說明子計畫一Voicebank(https://voicebank.ce.ntpu.edu.tw/) 錄音系統的操作,如何使用網頁進行錄音,當錄音時無法念較長的語句,可以把語料庫(一)、(二),改成錄語料庫(十一)、(十二),這是語料庫(一)、(二)的整理版,視覺上看起來語句會比較短,但兩者文字內容都是一樣的,也能更順利的錄完。希望能盡量幫忙錄完語料庫(一)至(八),錄完耗時約2小時左右。語料庫(九)至(十)是中英摻雜的語句,有興趣的也可以錄。
第二部分,一樣由林昭吟老師負責介紹子二與子四的知情同意書內容,並詳細說明本計畫的內容與研究參與者的權益。接著,再由張玉山院長和助理林佑宸負責說明子計畫二ezTalk(https://120.126.151.159:56432)錄音系統的操作,錄音時可以多收幾十個或幾百個句子,盡量不要同一個句子重複收音超過50次,希望能多錄整批語句,這樣才會更有利於訓練個人的辨識模型。
參與者也都積極回覆,詢問錄音上的問題,大家都表示非常有意願參與本計畫,衷心感謝大家對我們計畫的支持和參與!
子計畫二開始將訓練好的模型給使用者使用,這位使用者是經過團隊的復健科(北醫)的語音治療師判定其語言清析度只有2((0 = normal; 1 mild; 2 moderate; 3 marked; 4 severely deviant),經過我們的模型辨識後可以清楚的辨識及翻譯。未來我們期望更多的人透過我們的技術可以清楚的翻譯,讓這些朋友可以跟別人自由的溝通,不要有任可的語言溝通障礙。
視頻連結:https://www.youtube.com/watch?v=7lPhtgfc6Fw
想要與大家分享一位女士的故事,她五歲時罹患腦膜炎,但她卻在這趟人生的旅途中,展現了充滿堅韌與愛的人生態度。未來,這位女士期望透過AI科技所研發的溝通輔具,能夠無障礙地協助她分享自己的照護經驗。內容如下:
------------------------------------------------------------
因罹患了腦膜炎,導致她左側肢體障礙和口齒不清的後遺症。即使在家人的照顧和鼓勵下成長,卻也從小就承受來自外界的歧視,讓她極度缺乏自信和充滿自卑感。畢業於高中商業科後,她踏上北上就職之路,也在這段時光中遇見了給予她極大保護和照顧的先生,成為她生活中的支柱。因此,她在先生的呵護照顧下,就像一隻無尾熊一樣,過著幸福的生活。
然而,當她51歲時,她的先生罹患了「年輕型失智症」,那時先生才54歲。生活環境瞬間天崩地裂,她從原本被照顧者的角色轉變為主要的照顧者。幸運的是,她找到了Young記憶會館,得到了很多協助,讓她重啟對生活和對人生的態度。她也開始拍攝影片宣導「年輕型失智症」的照護,在這個過程中找到了自己的人生意義。
儘管她的先生目前已進入重度臥床階段,她依然想盡自己微薄的力量,為弱勢族群奉獻心力。受制於口齒不清的困擾,她渴望找到一種溝通方法,能夠更清楚地表達自己的照護經驗,給陷入困境的人一些幫助和希望。於是透過腦性麻痺協會的介紹,她找到了我們的計畫,希望能透過我們計畫開發的溝通輔具,分享自己的照護經驗,激勵那些正在面臨困難的人,讓他們知道生命中仍然有無盡的可能性和希望。
這段故事讓我們看見一位勇敢堅強的女士,透過困境找到了堅持和奮鬥的力量。儘管過程中充滿挑戰,困難重重,但我們希望透過AI科技技術,能研發出有效溝通的輔具,可以更有效地幫助語言障礙者克服溝通上的困難,我們大家一起努力,為弱勢族群奉獻心力。
-------------------------------------------------------------
感謝大家對我們計畫堅定的支持和參與,希望能夠讓我們共同走向可以自由溝通的未來。如果您對我們的計畫有興趣,歡迎大家留言了解更多相關資訊。
113/01/22(一)舉辦期末業務檢討餐會,主要討論的內容有:
1.計畫期中報告摘要:包括前言、研究目的、文獻探討、研究方法、和預期結果等。
2.實際進度:對比初步計畫書內容與實際進度,強調已提前完成或可能延遲的內容,以及相應原因。詳細說明已達成的內容、正在進行中的工作,以及即將展開的下一步工作。
3.成果分析:對於媒體、參與人數、關懷人數、收音人數、收音數量、社會觸及率、follow人數等成果,進行分析和評估,突顯這些數據對計畫的影響和效益。
4.合作成果:詳述與醫療單位、社福團體、大專院校、地方政府等合作單位所達成的具體成果,並探討這些合作對計畫的裨益。
5.問題與解決方法:在執行計畫期間遇到的問題,已採取初步解決的方法,並討論它們的有效性,進一步討論如何應對未來可能遇到的問題。
6.未來發展方向:提出未來計畫的發展方向,進一步的研究、改進執行方法,或者擴展到其他相關領域。
例如:與其他研究團隊或產業合作的可能性。
探討計畫的成效與擴散,並思考如何在未來持續發展這個輔具,是否能得到相關單位的合作機會,以及對輔具的補助方案,以加強計畫的可持續性。
第一場焦點團體座談會議(新北市輔具中心)
會議時間:2024年1月24日(三)上午9:30至12:30
會議地點:新北市蘆洲區集賢路245號9F
主辦:子計畫四共同主持人 林昭吟教授
主持人:張玉山院長
記錄:周家瑜助理、李新潔助理
由張玉山院長擔任主持人開始接下來的會議,首先以總計畫辦公室協助本計畫拍攝的影片做開場。
子計畫二:由張院長簡介相關內容,說明子計畫二的錄音系統ezTalk的使用,說明為什麼病友要使用這個語音錄製,以及如何使用此系統,例如:打我們想說的文字上去,系統可以將文字轉換成語音。
子計畫一:由江振宇老師介紹相關內容,過去投入漸凍人回聲計畫,說明當時直接到病友家中協助錄音的過程,以及VoiceBank的網頁操作與錄音狀況。
子計畫三:由戴敏育老師的助理廖文宣同學,介紹包容溝通支持多模態跨語言任務導向的對話系統,多模態為文字、聲音、影像的選擇,可以用不同的方式進行輸出,希望可以整合不同模態是本計畫的目標,也請大家透過加入本計畫官方line,請大家實際操作和使用這個功能。
在交流討論的過程中,藉由新北輔具資源中心所提供的意見,本計畫也更了解未來可以發展的方向,像是楊忠一主任回饋實務方面,電腦使用語音溝通軟體政府補助一萬至兩萬,提供情境溝通,並至少提供1000個溝通圖卡功能,如AAC(增強和替代性溝通)輔具,障礙者更需要的是把現有的技術拿來使用,主任認為目前技術已經可以應付,但在台灣仍有許多可以努力的面向;主任也分享了過去所認識的病友,透過治療師從旁協助確認其語意,讓病友開始學習新的事物,學習使用電動輪椅,而開始改善了他的生活。另外,王允駿語言治療師也回饋說,本計畫在做的輔具,聽起來口語與非口語障礙者都會使用到,障礙者之間差異性都很大,非口語障礙者是完全說不出話,雖然目前我們計畫主要還是以非口語障礙者為主,但在語言治療方面仍較少專屬於口語障礙者,因此認為本計畫的可創性、發展性很強,也給予我們支持與鼓勵。
子計畫四的林昭吟老師亦提出,是否有提供給照顧者的輔具呢?可能有來自於機構、家庭中的照顧者,也希望提供給照顧者輔具的使用。
楊忠一主任回饋,很多照顧者對於障礙的知能並不足夠,前端會透過語言治療師做評估後,可能還需要做整合性的系統,因每個人對認知功能的差異,會需要用到不一樣的整合方法,如果需要用到圖像整合的輔具溝通板,希望內容是涵蓋圖像、文字等多功能的整合系統。
座談會與會人員包括新北輔具治療中心楊忠一主任、徐麒晏督導、余虹督導、彭嘉惠督導、王允駿語言治療師,以及聲帆股份有限公司創辦人張文陽先生,共同參與討論。楊忠一主任以其豐富的經驗,深入探討輔具治療的實際應用情境;徐麒晏督導、余虹督導、彭嘉惠督導則分別從不同專業領域提供多元化的見解;王允駿語言治療師則透過其專業角度,提供了有價值的語言治療方面的經驗。張文陽先生與江老師長期的合作更深入彼此的了解,分享錄音系統技術特點和運作模式,並協助如何提升輔具的性能和使用體驗。整個會議過程都呈現相當熱烈的氛圍,每一位專業人員都樂於分享豐富的實務經驗,並提供寶貴的建議,讓我們受益匪淺。
這次座談會,不僅促進本計畫與專業實務界的交流,凝聚了專業人才,還為我們提供了多元且具體的建議。這些討論的成果為本計畫的實踐提供許多寶貴的參考意見,使我們更具體地了解障礙者的需求,進一步改進和精進計畫的執行方針,對未來的發展方向產生深遠的影響。希望透過本計畫可以讓障礙者的社會參與度增加,且在日常生活中也能自由的與他人交流。
最後,誠摯感謝各位專業人士撥冗參加,並慷慨分享寶貴的建議。我們也會持續不懈地努力,使本計畫的實踐效果更加卓越,對社會產生更深遠的影響。期許能夠透過這樣的努力,讓障礙者在社會中得到更廣泛的支持與理解。
【分享參與者心得】
這位參與計畫的錄音者,自從加入計畫以來,一直展現出堅韌不屈的精神,持續積極地協助錄音。他的這份堅持不懈非常難能可貴,不僅對自己有所助益,同時也提供了更多可供測試的錄音素材,有力地支持了我們的研發工作。
---------------------------------------------------------------------
他從小就受到構音缺陷的困擾,去年八月,在臉書上發現了由玉山院長主持的AI溝通輔具之研發計畫,引起了他極大的興趣。他迅速主動寫信給玉山院長,表達了想參與這個計畫的強烈意願。並且相信,一旦這個計畫研發成功,會為那些操作電腦較慢的人帶來一個巨大的突破,特別是對於腦性麻痺患者而言,這項技術也會透過電腦語音辨識系統,來協助更多像他這樣的構音障礙者。
自從他參與這項計畫以來,一直積極參與語音收集和測試,協助解決研究團隊面臨的各種技術問題。他不僅提供了大量的語料,更在模型的建構上達到了最高的完成度。他衷心期待這項研究能夠順利完成,這樣不僅能夠幫助他提高電腦的操作效率,同時也能造福所有面臨相似困境的人。
---------------------------------------------------------------------
感謝大家對我們計畫堅定的支持和參與,透過大家的共同努力,我們期望未來能夠為有構音困擾的朋友,創造一個無障礙的溝通環境。如果您對我們的計畫有興趣,歡迎大家留言了解更多相關資訊。
1月31日(三)本計畫團隊與師大劉秀丹教授團隊以遠距的方式做團隊與團隊間的第一次交流,對於劉教授團隊的目標及成果印象深刻。劉教授的團隊主要是以聽障者為主的包容科技,而我們團隊主要是語障者為主的包容科技。
雖然主要對象有差異,但卻有雷同之處,聽障者因為長期對於正確的語音無法辨識,因此在發音上亦有可能有所缺陷。而語障者因本身在語言固有的障礙,而無法正確的發音,甚至可能令人完全無法聽懂。因此在語音辦識方法,雖然二個團隊都有其需求,但語障者族群中可能的變異較大,因為大部份語障者的問題是無法透過訓練而改善的。
在這次的交流中,二個團體各自分享了所使用的技術及所面臨到的問題,透過此次的交流,二個團隊都相互的學習到很多。大家都有志一同的是利用目前最新的AI科技,為這些障礙者努力,使得在與溝通上可以無礙,這也是本團隊的主要目標「數位支持、溝通無礙:AI科技協助語障者溝通」。
另外,我們也相約,未來如果計畫有持續下去,我們將半年交流一次,相互的學習,期望可以更精進。
千呼萬喚始出來,在國科會的支持下,經過專業的導演及攝影師的拍攝剪輯,在所有參與者的配合下,終於完成並且在大家面前呈現。我相信大家都是第一次拍攝記錄片,到現在還是非常的緊張,期望這個影片可以讓需要的人,感到無限的希望!
這個影片要謝謝非常多人,謝謝國科會、計畫總辦公室、導演、我們計畫團隊、及影片中的三位參與者。但是最重要是需要的人勇敢的走出來,跟我們聯絡,讓我們來協助!
影片鏈結:https://www.youtube.com/watch?v=Qf0oYYAMyjI
2024年2月29日(四)於高雄鳳山婦幼館舉辦南區區焦點座談會:
會議時間:2024年2月29日(四)14:00
會議地點:高雄市鳳山區光復路二段120號(鳳山婦幼館 312教室)
主持人:張玉山教授/院長
列席者:戴敏育副教授、林予安助理教授、周家瑜兼任助理
與會人員:王玄宇主任、蔡紀暘督導、曾芸家主任、李雅萍語言治療師
首先,由張院長介紹本國科會計劃,藉由國科會所拍攝的宣傳影片(https://youtu.be/Qf0oYYAMyjI?si=nVfq8f729Lg1xhWr),讓與會人員更清楚我們的計畫內容,以及介紹ezTalk的使用方式,包含錄音方式、整句串接的錄音及歷史語句,也提供研究參與者測試的收音結果供參考。第二部分,也協助說明子計畫一漸凍人回聲計畫voicebank的基礎內容。
接下來,由戴老師說明子計畫三的多模態形式;最後,再由予安老師介紹子計畫四的內容,是技術與研究參與之間的橋樑,進行錄音前後測的生活品質問卷的分析。
主要討論:
玄宇主任針對錄音的方式題問,張院長回覆本計畫考量到一致性、可即性目前以網路的方式進行;紀暘督導亦詢問錄音為來的使用與觸及性;芸家主任是否每位個案皆需要從頭開始進行錄音,是否有進行分類?
雅萍語言治療師,認為構音障礙者、病友等語音特質差異大,她也回饋針對「個人化特質提供語料」,對於語音障礙者而言是很棒的技術,像是氣動式的輔具上能保留障礙者原生語音,但是電子的輔具/講話器導致病友講話沒有個人特色,生活品質就會大幅影響;認為子計畫一voicebank對於全喉式切除的病友幫助很大,能夠使其保留自身的聲音,若是能夠推廣
voicebank出去,想必會對病友很有幫助。
張院長也回饋在AI技術端的演進相當快速,與一般生技公司的付費技術不同,希望能夠藉由本計畫幫助需要協助的病友/障礙者,也期待本計畫的內容能夠繼續進行下去。
雅萍語言治療師亦詢問語言治療這部分,亦涵蓋智能障礙者,其認知功能面及語言方面可能有雙重的需求,想詢問本計畫是否會擴及其他障礙類別?張院長回覆本研究目前專注於構音障礙者端,觸及的障礙者相當廣泛,目前在這方面耕耘,也期待未來有機會持續發展。
過程中談及許多本計畫技術端的操作,以及實務層面的交流,對於計畫助益良多。
國立臺北大學執行國科會包容導向科技計畫:
數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣計畫
【活動公告】
本計畫將於2024年03月18日 ,假國立東華大學舉辦專家學者焦點座談會,歡迎對AI科技智慧語音系統和科技溝通輔具的研發感興趣者蒞臨參加。
主題:第三場焦點團體座談會
日期:2024年03月18日(星期一)下午2:00
主持人:張玉山院長(國立臺北大學資訊工程學系)
地點:花蓮縣壽豐鄉大學路二段1號(東華大學花師教育學院A309會
議室)
2024年03月8日(五)早上帶領學生去八里教養院協助指導我們的輔具使用方式,也了解不同狀況的院生在使用輔具上可能遇到的問題,也把這些問題收集回來以便我們的系統再精進,調整成他們的院生可以使用且方便收音的方式。
照顧服務員說他們的院生很希望也很高興可以協助收音,只是每個院生的狀況可能都不一樣,確實要協助他們可以溝通需要有不同的方式,這也是我們要持續努力的方向。
計劃使用者的成果分享,這位是中度語音障礙,透過我們的系統可以自由的講話,與人溝通。
影音鏈接:
https://fb.watch/qK5R6Hirya/
另一位參與者及協助系統開發者實測的結果,我們利用了二種技術,雖然他的構音嚴重程度是最嚴重的,但是經過不段的調校,系統的辨識速度及準確度不斷的提升。我們還是會再繼續努力,我相信應該可以快速的協助有這樣狀況的朋友。
影音鏈接:
https://www.youtube.com/watch?v=ojO9Dl-R9fc
各位大家好!
本計畫預計在3月13日(三)下午三點,針對計畫內容舉辦一個知情同意及操作說明會,本計畫的教授們會親自在線上做說明,預計會花一個小時左右的時間,如果有興趣參與本計畫的朋友,可以先用表單連結加入報名:
https://docs.google.com/....../1FAIpQLSefuO1K....../viewform
報名之後我們會把視訊連結用e-mail寄給您。歡迎踴躍報名參加!並請參閱本網站置頂之招募研究參與者公告。
大家好,本計畫開始招募今年度2024年研究參與者,請有意願參與收音計畫的研究參與者,填寫報名資料,請大家多多幫忙推廣宣傳本資訊,非常感謝!
#【徵求對象】、【研究方法】及【報名方式】詳如圖片所示
報名表單網址:https://forms.gle/HFsLXpzX5LaxJ63x6
2024年3月13(三)下午三點舉辦線上「子計畫二知情同意及操作說明會」:
首先,由林昭吟老師負責介紹子二與子四的知情同意書內容,並詳細說明本計畫的內容與研究參與者的權益。本次針對自身權益的部分,研究參與者也提出了自己的想法提供給我們。
接著,再由張玉山院長親自詳細說明子計畫二ezTalk(https://120.126.151.159:56432)錄音系統的操作,錄音時可以多收幾十個或幾百個句子,盡量不要同一個句子重複收音超過50次,希望能多錄整批語句,這樣才會更有利於訓練個人的辨識模型。
參與者也都積極回覆,詢問錄音上的問題,大家都表示非常有意願參與本計畫,衷心感謝大家對我們計畫的支持和參與!
20240318 東區焦點座談會(第三場)
第三場焦點座談於2024年3月18日在花蓮東華大學花師教育學院舉行,特別感謝特教系楊熾康主任,代我們邀請多位在地專家學者與會,包含電機系老師、特教系老師、業界工程師、語言治療師、職能治療師、物理治療師等等。
本次焦點座談會著重於技術面的交流,特別是關於吶語症溝通輔具的技術及資源。在聽完計畫主持人張玉山老師介紹後,專家們普遍建議可以考慮由兒童或青少年開始學習運用AI科技溝通輔具。此外,專家們也提供許多國內外的輔具或軟體資訊供我們參考,並提到盤點目前現有資源的重要性,再做進一步開發。也建議我們可多運用現有的資源或solutions,例如IOS的語言訓練模型。另有專家認為語障者的樣態非常不同,可以先有某些篩選過程或多一些參數。
開發語障者的AI溝通輔具的確是跨域整合的工作,也涉及到不少觀念的轉換。很高興有很多專家學者長期關注到這些議題,透過面對面的交流,讓我們學習更多,也獲得許多寶貴建議與未來合作可能。
國立臺北大學執行國科會包容導向科技計畫:
數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣計畫
【活動公告】
本計畫將於2024年03月25日,假臺中市愛心家園舉辦專家學者焦點座談會,歡迎對AI科技智慧語音系統和科技溝通輔具的研發感興趣者蒞臨參加。
主題:第四場焦點團體座談會
日期:2024年03月25日(星期一)下午2:00
主持人:張玉山院長(國立臺北大學資訊工程學系)
地點:臺中市南屯區東興路一段450號(臺中市愛心家園)
20240325 第四場焦點座談會(台中愛心家園)
本次焦點座談會位於台中愛心家園的南區輔具中心,特別感謝輔具中心劉淵植主任代我們邀請在地多位專家學者與會,提供我們許多寶貴意見。
此次會議有多位聽力語言專家與會,例如台灣聽力語言學會蔡孟儒理事長、台灣輔助溝通系統發展學會李琇菁理事長,對於本計畫最缺乏的語言學、語言治療、溝通輔具等提供學理上及實務上的見解,亦有助於修正本計畫AI溝通輔具系統的設計與方向。
另外,多位專家也建議我們可以調整收音介面,例如以問句取代直述句,或以易讀版方式讓語障者可以自己操作收音。也有專家建議收音的語庫可分為初階、中階、高階;或先收常用生活語句(例如50句),再延伸至其他較少見的語句,讓受試者可以較早看到成果;同時也建議我們可以舉辦初步成果發表會,以提高持續收音的動機。關於子計畫三的AI對話客服系統,有專家建議或許可以加入泰語或越南語,以便需要早療資訊之外籍配偶可以自行使用。
最後本計畫居住於台中的研究參與者顏毓瑾小姐特別來到愛心家園參與會議,並由其母親代表轉述感謝之意。研究團隊也很感謝顏小姐的參與,並樂見系統所建構的語言模型能供顏小姐使用。
【系統新功能上線】
有構音障礙而擔心講話的內容別人聽不懂的朋友們,您有講課、演講、致詞、自我介紹、⋯⋯等的需求嗎?我們新增了一個功能喔!
不論您是參加子計畫一或是子計畫二,在子計畫二的系統中,
超連結如下:
我們加入了一個新的功能,可以不用一句一句的講,然後翻譯,可以一次播出一段或是一個檔案的內容,內容可以是中文、英文、中英文混合的,可以讓您用在講課、演講、致詞、自我介紹、⋯⋯等,只要您先把內容打好,就可以依序的播放。也可以把一些常用的場景內容,先儲存起來,只要選擇您想播放的內容,可以更快速的表達您所要講的內容喔!這樣很多的內容可以重覆使用,不用每一次都要重打或重講一次喔。
這個新功能可以
1. 新增目錄: 可以讓您依內容新增很多不同的目錄
2. 上傳檔案: 可以讓您上傳你所要播的檔案內容到適當的目錄
3. 編輯內容: 可以讓您編輯您所要播的內容,並存檔
4. 雲端硬碟操作:可以讓您選取Google 雲端硬碟內容
5. 刪除目錄及檔案: 當您不需要的目錄及檔案都可以刪除
6. 檔案內容重頭播放
7. 檔案內容重所選取的位置播放
8. 調整播放的速度: 依個人的需求調整播放的速度
我們有製作了一個說明影片方便您學習,操作的說明如下,歡迎大家使用喔。有什麼問題或建議也可以在這裡反應給我們喔。
113年4月11日(四)於音律電機資訊大樓3F01院長室,進行第五次工作討論會議,主要討論了第一年計畫的執行情況,同時還探討了在第二年計畫時,要如何改進和提升執行效率等事宜。
出席人員:張玉山院長、林昭吟教授、江振宇副教授、戴敏育副教授、林予安助理教授、李新潔助理。
這是計畫參與者,也是使用者之一的分享,目前持續在精進及優化本系統。
-----------------------------------------------------------------------------------------------
大家好,我是計畫參與者,同時也是該系統的早期開發者,目前仍然會持續的協助該計畫的系統開發討論,後續仍然會致力於該研究,我們都知道講話是人與人之間溝通最自然且容易的方式,不過,在世界上,有部分的人因先天或後天因素,想要清楚的講話是相當困難的一件事,我本身也是這樣的患者,剛好我本身就讀資訊工程,從大學開始,我就開始運用自己所學的專業嘗試改善我的溝通問題,到了碩士班,正逢AI快速發展的時候,我的指導教授-張玉山教授,鼓勵我嘗試運用AI 科技辨識我的聲音,由於我們都不是很了解這方面的知識,相關文獻也不多,我們經常討論探索,雖然跌跌撞撞的,很想放棄,但老師總是鼓勵我,我們總算完成了一個版本,但距離Free talk 的目標還有一段距離,我們現在是實驗室全員動起來,致力於該計畫,除了技術上有所提升,其它的參與者也提供了不同看法,讓我們發現更多的問題與狀況,相信不久的將來,能夠幫助到更多人!
-----------------------------------------------------------------------------------------------
本計畫很榮幸,將於4月27日參加腦麻協會的會員大會,推廣及分享我們計畫的成果。目前參與我們計畫朋友中已經收集了各種構音障礙朋友的語音檔超過72萬個字的語音,也有10位朋友正在使用我們所訓練的模型。我們謝謝這些朋友持續的參與收音及使用,使得我們的技術可以精進,準確度也算不錯。這是幾位最近測試的測試結果,透過我們系統的測試,測試的句子都是他們平常講的話,從辨識成功與全部(成功及失敗總和)相除的結果看來,可以看到結果還算不錯。我們期望可以更精進,幫助更多需要幫助的朋友。
2024年04月19日(五) 拜訪中華民國腦性麻痺協會
本計畫團隊於2024年4月19日(五)下午三點至台北市中山區的中國民國腦性麻痺協會進行拜訪
本次拜訪由子計畫三的主持人戴敏育教授負責介紹與說明包容溝通支持多模態跨語言任務導向對話系統,並與腦麻協會的同仁共同討論未來合作方向與未來展望等。
子計畫三 - 包容溝通支持多模態跨語言任務導向對話系統的研究內容為透過蒐集特定領域資料(例如:蒐集病友、照護人常見的問答),並透過現今的生成式AI、大語言模型等,搭建特定領域的多模態跨語言任務導向對話系統。
根據使用者詢問的特定領域知識,本研究的包容溝通支持多模態跨語言任務導向對話系統可使用資料庫提供的資料進行回答,可以節省重複性高且繁瑣的工作,緩解人力不足的問題。
透過本次拜訪,本研究團隊與中華民國腦性麻痺協會進行了深層的交流,希望可以透過AI人工智慧的技術協助腦麻協會等社會福利機構,在未來的工作上給予更多的幫助。
【溝通輔具使用心得分享】
這位參與者來自台中,同時也是無礙玩家生活關懷協會的會員。當無礙玩家的理事長告知他臺北大學張教授計畫團隊,正在進行一項國科會包容導向整合型計畫「數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣」,並邀請他參與時,他毫不猶豫地表示非常樂意參與,並真誠地希望能讓構音障礙者的溝通更加便利。
起初開始錄音時,他感到有些無聊,因為需要反覆錄製同一個單音或同一句話,並且次數要達到一、二十遍(為了訓練模型時更好地辨識語音),這使得整個過程顯得有些單調乏味,甚至想要放棄。然而,隨著收音量的增加,可用於模型訓練的數據量也隨之增加,他非常期待看到自己的模型測試結果。目前已經進行了一些測試,他試著測試了52句話,其中有49句是正確的,這個結果也讓他感到非常高興,並且讓他更加期待這個輔具系統的未來發展,深信它將變得越來越完善。
-------------------------------------------------------------------------------------------------------------
最後,他要特別感謝無礙玩家生活關懷協會的理事長和臺北大學的張教授計畫團隊,因為有他們的介紹和邀請,才讓他有機會參與這個具有意義的計畫。他期待著能與團隊一起為更多有需要的人帶來幫助和改變。
2024年04月25日下午1:00 舉辦線上知情同意及操作說明會
由江振宇老師介紹子計畫一的內容,說明如何註冊漸凍人回聲計畫,以及voiceband的網頁操作,讓參與者能夠理解如何錄音操作。
接著,由張院長簡介子計畫二的內容,說明子計畫二的錄音系統ezTalk的使用,以及說明為什麼病友要使用這個語音錄製,以及如何使用此系統。最後由昭吟老師說明子一及子二知情同意說明,讓參與者理解研究用途及確保自身權益。過程中,陽光基金會南區中心的督導也熱情的提問,表示對本計畫非常感興趣!
【溝通輔具使用心得分享】
這位參與者是中華民國腦性麻痺協會的會員,他最近測試的結果非常好,好到出乎我們的意料之外,儘管他一開始在測試時犯了許多錯誤,但他絲毫不放棄,堅持不懈地調整(調整了非常多次)。誠如他坦言,當他看到準確度逐漸提高時,那種成就感是無法言喻的。同時,他也注意到 iPhone 手機的語音輸入越來越準確,這給了他極大的鼓舞,讓他深信這件事情具有重大的意義。這樣的進步,對於身障人士而言,無疑也是一大福音。
-----------------------------------------------------------------------------------------------------
他真心希望這個計畫能夠持續下去,讓更多的人能夠聽到他們的聲音,並順利地融入社會團體中。這樣的努力和進步不僅為他們帶來了新的希望,也為社會帶來了更大的包容和共融。
2024年04月27日(六)於國立台灣師範大學參加中華民國腦性麻痺協會會員大會
由計畫主持人張玉山院長介紹本計畫的前瞻性,並展示了相關影片和目前為止的錄音成果。
由子計畫三的主持人戴敏育教授負責介紹與說明包容溝通支持多模態跨語言任務導向對話系統,並與腦麻協會的同仁共同討論未來合作方向與未來展望等。
由子計畫四的主持人林昭吟老師簡單說明知情同意書內容和計畫主旨。
透過此次的活動,我們的研究團隊與中華民國腦性麻痺協會進行了更深層的交流,希望可以透過AI人工智慧的技術,幫助到更多構音障礙的朋友,協助他們未來能夠更加自由地溝通。同時也希望能協助腦麻協會等社會福利機構,在未來的工作上給予更多的幫助。
【工作討論會議】
時間:民國113年5月16日(星期四)下午16時30分
地點:三峽校區音律電機資訊學院大樓3F01院長室
主持人:張玉山 院長
出席人員:張玉山院長、林昭吟教授、江振宇副教授、戴敏育教授、李新潔助理。
討論第二年度各子計畫欲達成之KPI,並分配相關工作。
【漢聲廣播電臺採訪】
播出時間:FM 15:10-16:00(週一至週四)
主持人:劉佳怡
2024/05/20【原來銀行可以存聲音!語音銀行如何幫漸凍症病友說出想說的話呢?!】:台北大學通訊工程學系江振宇博士/漸凍人協會黃玲琴社工督導
在這集中,節目深入探討了以下幾個內容:
1.語音銀行的研發歷程及起源。
2.語音銀行技術對漸凍症病友的幫助。
3.聲音對漸凍症病友的重要性。
如果您對這個話題感興趣,請點擊下面的連結聽取完整訪談,了解更多語音銀行如何幫助漸凍症病友表達心聲。
【漢聲下午茶】:https://www.voh.com.tw/TW/Playback/ugC_Playback.aspx?PID=218&D=20240520
【漢聲廣播電臺採訪】
播出時間:FM 15:10-16:00(週一至週四)
主持人:劉佳怡
2024/05/21【文字轉語音!失去的聲音還有機會重現溫暖】:台北大學通訊工程學系江振宇博士/漸凍人協會黃玲琴社工督導
在這集中,節目深入探討了以下幾個內容:
語音銀行技術如何在漸凍症患者身上發揮作用,以及對他們的影響、回饋和成效等方面。
首先,把音色記錄下來,透過收集大量數據,可以先利用一位專業語者,錄大概10-15小時的語音,建立一個基礎的模型,就可以播報。然後,再請病友去錄比較小量的語料,提供少量語料,大概是15-30分鐘,用語音合成技術,把他們的聲音能夠透過文字轉語音的方式播放出來,這樣就可以建立出一個屬於他們自己的音色的文字轉語音系統。
目前,我們提供的錄音文稿都是文章,因此合成出來聲音比較像在讀稿,接下來我們的目標是希望能夠讓病友的聲音帶有情緒,以更生動地描述他們的情感。
如果您對這個話題感興趣,請點擊下面的連結聽取完整訪談,了解更多語音銀行如何幫助漸凍症病友表達心聲。
【漢聲下午茶】:https://www.voh.com.tw/TW/Playback/ugC_Playback.aspx?PID=218&D=20240521
113年6月04日(二)12:00-13:00 在學校語言中心翁主任及蔡蕙如老師的邀請,談談「AI在吶語症患者的支持」,每位老師都很專業的討論並且提供建議,大家也對這方面有需求的朋友可以提供協助都有高度的認同,對本計畫有很高的期許,也了解我們計畫在執行上的問題及困難,給我們很多的鼓勵。
本研究團隊林昭吟老師113年6月13日(四)於日本京都市舉行之東亞社會政策年會的「身心障礙生活品質研究」場次,介紹本研究計畫並發表語言障礙者之生活品質有關的論文。就本研究初步發現,目前語言障礙參與者之生活品質分數相較於非障礙者低,但與視覺障礙者或顏面損傷者相比差異不大。來自香港的與會者對於本計畫抱持高度興趣並提出問題,也對於AI科技運用於改善語障者之困難表示肯定,符合包容科技的精神。他們也分享在香港將AI科技運用於社工個案的簡易諮商,與本計畫子計畫三欲建構由AI支援的輔具諮詢系統有異曲同工之妙。此外,香港團隊以質化研究的敍事分析評估智能障礙者父母參與親職教育的成效,也相當值得本團隊學習。
[講座] 長遠的罕見疾病: 你我都可認識的ALS漸凍症
時間:2024年06月22日(六)14:00-16:00
本研究團隊的江振宇老師將演講「疾病帶不走的聲音:為漸凍人打造的專屬語音合成系統」這一主題。
希望更多的朋友能關注這個議題,也希望更多有此需求的朋友能得到幫助。
連結:
https://www.medicaltaiwan.com.tw/zh-tw/news/02959C981A9BF375/list-info.html
2024年6月18日(二)下午17:30~18:30子計畫三戴敏育教授與腦麻協會的蘇教授常務監事洽談腦麻協會的地板滾球協會的客服系統,準備利用多模態的大語言模型建構一個可以自動回答腦麻的朋友問題的客服系統,期望協助更多的腦麻朋友。
國科會「以包容為導向之科技計畫」推動與協調計畫辦公室,為使計畫順利推廣,請各計畫團隊在力所能及的範圍內,每月提供與計畫相關的報導。
我們相信,在大家的共同努力下,這些寶貴的成果將會獲得更多的關注和認可,非常期待大家的參與和貢獻。
歡迎大家查看以下相關連結以瞭解更多資訊:
https://www.ttfi.com.tw/project02-item/digital-support-communication-without-hindrance
2024年6月23日,上午十點舉行線上「子計劃二知情同意書及系統操作說明會」
首先由林昭吟老師說明整合型計劃的進行模式與流程,簡介計劃架構、研究預期效果與參與者的權利、資料保存及保密……等等,使參與者能夠了解本計劃的進行,並知悉自身相關權益。
接著張玉山院長親自講解子計劃二當中所使用的ezTalk錄音系統,包含網頁介紹、語音蒐集對本研究的意義、操作步驟、注意事項……等等,搭配院長一步步的示範,希望有助與會來賓更清楚研究內容及實作方式。
在會議最後,我們也邀請參與者加入官方Line好友(https://lin.ee/qky0jkb),以便針對本研究的任何疑問與建議能及時獲得回應!
謝謝參與者們在會議過程中的積極回饋及提問,透過線上會議的交流,希望大家都能有所收穫,由衷感謝大家對本研究的支持!
【活動回顧】長遠的罕見疾病:你我都可認識的ALS漸凍症講座
2024年06月22日(六),江振宇老師為大家演講「疾病帶不走的聲音:為漸凍人打造的專屬語音合成系統」這一主題。
江老師深入淺出地介紹了(VoiceBank-漸凍人協會回聲計劃),這項創新技術如何幫助漸凍症患者保留和重建他們的聲音,並提供一個專屬的語音合成系統,即使在病情惡化導致語音能力喪失後,依然能夠使用熟悉的聲音與家人朋友交流。
1、語音保存:通過大量錄製患者在疾病早期的語音數據,並進行數據庫保存。
2、語音合成:利用先進的語音合成技術,對錄製的語音數據進行分析和處理,提取聲音特徵,重建並生成自然的語音。
3、個性化設置:生成合成語音後,針對每位患者的聲音進行反覆測試和調整,確保合成聲音與原聲匹配。
4、情感表達:除了基本語音合成外,還能表達不同情感,如高興、悲傷等,提升交流的真實性和有效性。
希望患者通過這個語音合成系統能重新獲得語音能力,實現與家人的自然交流,改善生活質量。
未來,我們將繼續致力於推廣這項技術,希望能幫助更多有需要的朋友,感謝大家的支持與參與!
計畫團隊的老師們將於2024年7月8日(一)參與本校永續辦公室舉辦的【NTPU X UC Berkeley X Taiwan Carbon Solution Exchange Forum】簡要分享計畫成果。
國立臺北大學對於我們團隊的成果非常支持與肯定,特別邀請本團隊參加7月8日與UC Berkeley的NTPU Forum,交流有關ESG的議題,本團隊將以研究社會責任(Research Social Responsibility) 來提供ESG相關的議題報告, 我們團隊認為研究者亦需要對社會負起一些責任,對社會有一些貢獻,完全符合ESG的精神。
我們團隊將以AI包容科技在臺北大學的執行成果來跟UC Berkeley的GCCI Executive Director Prof.
Solomon Darwin分享,將我們的成果具體呈現出來。擴展AI包容導向科技計畫的成果,期望可以讓全世界都看到。
【活動回顧】2024台灣運動神經元疾病研討會
2024年6月29日(六),江振宇老師為大家演講了【ALS Voice Bank】這一主題。
江老師在這次演講中介紹的是VoiceBank網站的各種功能、發展歷程、使用者的反饋、目前的工作進展以及未來的發展方向。VoiceBank網站(https://voicebank.ce.ntpu.edu.tw/)為漸凍症病友提供了兩個主要功能:「語音銀行」和「語音系統」。
1、「語音銀行」:這個平台讓病友能夠錄製並儲存自己的語音檔案,保留獨特的聲音記憶。
2、「語音系統」:這項服務提供客製化的文字轉語音服務,使病友能夠使用輔具輸入文字,並生成帶有自己音色的合成語音輔助來進行溝通。
我們希望通過這次演講,能讓更多病友了解並使用VoiceBank網站提供的服務,讓他們在面對挑戰時依然能夠保持交流的自由和個性。
會議名稱:【Taiwan Carbon Solution Exchange X NTPU X UC Berkeley Forum】
時間:113年7月8日上午9:00-12:00
地點:國立臺北大學 圖書館2樓思巢
很榮幸今天能在此活動展示國科會AI包容導向科技計畫的研究成果。本計畫是整合型計畫,旨在開發和應用AI科技技術,為語言障礙者提供更好的溝通輔具,提升他們的溝通自由。我們不僅專注於技術開發,還致力於了解這些技術對語言障礙者生活品質的影響。
子計畫一:由江振宇副教授主持,專注於增加語料蒐集人數,邀請不同群體參與錄音。優化文字轉語音系統音質,並整合至(VoiceBank-漸凍人協會回聲計劃)網站。
子計畫二:由張玉山院長主持,專注於語音辨識系統的研究,展示語音訓練的辨識模型及其精準度。
子計畫三:由戴敏育教授主持,致力於研究多模態跨語言任務導向對話系統,結合視覺、語音和文字等多種模式及語言,提升病友與照護者的生活便利性。
子計畫四:由林昭吟教授主持,研究AI溝通輔具對語言障礙者生活品質與社會責任的影響,強調科技應如何對社會負起責任,實現包容科技的精神。
對於語言障礙者而言常面臨嚴重的溝通問題,不僅影響他們的教育、就業和社會生活,還可能導致心理健康和生活品質的問題。現有的溝通輔具雖有所幫助,但仍有許多局限。本研究團隊希望開發更先進的AI輔助溝通技術,能夠引起更多社會關注,推動政府和相關機構加強對語言障礙者的支持,共同提升他們的生活品質。
此次論壇讓我們吸取了很多先進經驗,感謝主辦單位提供展示和交流的寶貴機會。希望通過這次論壇,我們能更好地推動AI包容科技的發展,為社會作出更大貢獻。
【招募研究參與者公告】
大家好,本計畫開始招募新一輪的研究參與者,請有意願參與收音計畫的參與者,填寫下方的報名表單,也請大家多多幫忙推廣宣傳本資訊,感謝大家的支持與協助!
#【徵求對象】、【研究方法】及【報名方式】詳如圖片所示
20240710 拜訪研究參與者賴宗育
宗育是一位重度腦性麻痺患者,去年參與台北市第一選區(士林、北投)立委選舉,於選舉期間政見發表時,要求延長發表時間,卻遭北市選委會拒絕,參見新聞報導(https://udn.com/news/story/7323/7846762)。我們看到這則新聞,思考語音辨識系統是否可以協助宗育順利地發表政見,為身心障礙者權益發聲。
研究計畫主持人張玉山教授於是在原先ezTalk系統中,除了透過收音與建構使用者語音模型外,亦開發文字預先輸入以及自動播放的應用功能,使語障者不用經過枯燥的收音過程,即可快速地應用ezTalk系統。因此,昨天請宗育試用之後,提供我們寶貴的修正意見。宗育以前也用過類似的溝通輔具系統,但需要逐字輸入,不似本系統可以以字詞前後串接方式,減少輸入的不便。其次,宗育也建議系統播放的聲音可以更有選擇性或接近本人聲音,而不是目前的電腦罐頭聲音,我們也會往這方面努力。
會議名稱:與劉秀丹老師團隊技術交流會議
時間:2024年07月11日(四)晚上7:30
本計畫團隊與師大劉秀丹教授團隊以遠距方式進行了第二次交流會議。第一次交流後,我們對彼此的研究方向和成果產生了濃厚興趣,因此決定舉行二次交流會議,希望更進一步了解雙方的研究進展與目標,以深入探討未來的合作計畫。
劉教授的團隊主要研究聽障者的包容科技,而我們的團隊則專注於語障者的包容科技。在這次會議中,雙方團隊各自分享了所使用的技術、面臨的問題及研究成果。這次交流不僅加深了我們對彼此工作的理解,還學到了許多有價值的經驗和技術。雙方團隊都認為,利用最新的AI科技來幫助障礙者克服溝通障礙,是我們共同的使命和目標。
我們計劃未來保持定期交流,彼此學習和借鑒,以期在包容科技領域取得更大突破,為障礙者提供更好的溝通支持。
2024/07/13(六)參加無礙玩家生活關懷協會第二屆第一次會員大會
本計畫主持人張玉山教授受到無礙玩家生活關懷協會理事長賴志銘先生的邀請出席協會第二屆第一次會員大會,今天出席該協會的包含產官學界。這個協會對於有障礙的朋友都提供各種生活上的協助及課程訓練,讓有需要的朋友可以透過一些課程,具備一些生活技能,足以應用在未來的生活中。
今天張玉山院長以國科會所拍攝的影片介紹了各個子計畫,心口戈含本計畫的目的、進展、及提供的協助,受到會員們熱烈回響,我們也期望有更多的朋友參與本計畫。
會議名稱:包容科技子計畫4實體會議
會議時間:2024年7月15日
包容科技子計畫4團隊以實體方式進行會議,一同規劃團隊未來計畫進度。在會議中也積極討論未來舉辦焦點座談會的機構,期許可以拜訪各個專業學會。除此之外,團隊也進行了分工,並設定今年度欲達成的目標!
20240717 拜訪研究參與者孫嘉梁
嘉梁是一位重度腦性麻痺患者,具有美國德州Austin大學數學博士,曾有過許多媒體報導(https://www.mirrormedia.mg/story/20180125pol020),但他在說話及行動方面有困難,連操控滑鼠都沒辦法,只能逐一敲著鍵盤。嘉梁去年參與我們計畫的收音,幾乎是前三名的報名者,但由於說話比較慢且不穩定,收音量一直很難提升。
7/17下午計畫主持人張玉山老師及林昭吟老師登門拜訪嘉梁,介紹我們ezTalk語音辨識系統的新功能,可以預先輸入常用字詞,再用組裝排列方式,透過電腦語音表達。嘉梁給我們很多寶貴意見,例如在輸入方面,他無法使用滑鼠輸入,想知道我們的介面可否以鍵盤操作。在輸出方面,嘉梁也期待有不同的語速、不同的語調,甚至可以有停頓幾秒的設計,可以更貼近個人喜怒哀樂的表達。這些建議都是我們可以去努力改善的目標。
20240722 第四次拜訪八里愛心教養院
去年9月12日我們第一次拜訪八里愛心教養院,當時見面的院生如今已是我們的研究參與者,持續參與本計畫的收音工作。今日本團隊第四次造訪,除了了解院生收音情形,也介紹收音系統新的字詞串連、逐句稿播放等功能,看著院生在語言治療師及職能治療師細心地引導下,努力地講出一句句話,然後收錄、上傳到雲端伺服器儲存及辨識。期待可以早日創建出參與院生的個人語言模型,但發現在收音過程中便可以帶給院生與AI科技接觸的機會。由於有些院生無法自己打字,需要工作人員協助輸入字詞及操作平板,也需要工作人員耐心的示範及引導;關於這個部份本團隊也正在研發如何以少量收音,便能達到語音模型建構的效果,以節省人力。但在此之前,還是非常感謝八里愛心教養院謝院長、復健組組長、語言治療師、職能治療師等等工作人員的協助,讓本計畫能持續運用於實務場域,也由實務場域中找到更多可以改善的地方。
2024年7月30日(二)活動
參加國科會「工作會報」
計畫團隊前往中央研究院,參與國科會「以包容為導向之科技計畫」113年度7月工作會報,並匯報了第一季至今的研究成果、執行進度、推廣狀況以及使用者回饋。我們也討論了目前遭遇的挑戰和未來的執行規劃。感謝與談人提出的寶貴建議,團隊將根據這些意見和方向繼續努力,確保計畫能順利進行。
拜訪陽光基金會
在同一天,我們拜訪了陽光基金會,並與董事長及董事們進行了深入交流。老師們展示了計畫的執行狀況,並探討了技術操作的細節。這次實務層面的交流對於計畫的改進和推廣具有重要意義。我們希望透過社會服務團體的協助,能夠幫助更多有需要的朋友。感謝大家的支持與參與,我們會繼續全力以赴,推動包容科技的發展!
會議名稱:焦點座談籌備會議
會議時間:2024年8月12日
包容科技子計畫4團隊以實體方式進行會議,一同討論未來預計進行的數場焦點座談會相關細節。
期待能透過焦點座談會的舉辦,讓更多人了解本計畫內容!
會議名稱:腦麻患者服務經驗分享會
會議時間:2024年8月13日
包容科技子計畫4團隊邀請這次前往中華民國腦麻協會夏令營的志工,分享在營隊之中的挑戰和進步。
「在營期的過程中,最主要的工作是協助乘坐『不可收輪椅』的學員上下遊覽車,並使用安全鎖將輪椅固定在專門穩固輔具的軌道上。過往有經驗的志工曾分享,因為一次只能上、下一台輪椅,所以常常上下車就需要花二十分鐘左右。但隨著協助的經驗累積,也藉由與照護員互相分工,使得每次在協助上下車的流程都越來越快。」——曾同學
「在進營隊前,我們有先上一套完整的課程,包括:輔具的運用、身心障礙五階層,在輔具運用的實際操作是我認為學習最紮實的一環,我們一關一關去體驗,去思考患者的需求,也有實際做志工從旁輔助,我發現很多東西都是有一些竅門的,不是說用蠻力就可以成功,同時如果只用蠻力患者也一定會感到不舒服,我想這些知識真的需要實際演練才能熟悉,如果只是坐在位子上聽講,肯定會搞不懂,那堂課真的是非常豐富又有用的一堂課。」——何同學
「這個營隊的核心目標就是要讓參加的學員能獨立完成許多事且體驗以往沒有嘗試過的活動,而我認為這次當志工是讓我覺得有徹底做到這些的。學員們在第三天晚上的營火晚會和第四天的結業式都講了很多發自內心、令人欣慰的話,每位學員講完不免都讓人感動不已,連我也都泛淚。」——陳同學
每位志工都在營隊中更看見腦麻患者的需求,並且學習到如何應用輔具,在營隊中收穫的感動和經驗,都將成為珍貴的養分。
20240816 前往陽光基金會南區服務中心
陽光基金會南區服務中心的社工先跟聆聽者說明團隊的成員及此次前來的用意。
首先由張玉山院長開始做介紹,介紹子計畫二的內容和如何操作ezTalk,社工們也很貼心,把操作過程自行錄影下來,以便後續協助參與此計畫者操作。
第二,由林昭吟老師介紹三個同意書的內容,分別的意義為何。簽名後除了可以開始錄音,若參與計畫後覺得不舒服也可以隨時中止參與。
最後,由江振宇老師說明子計畫一的內容,告訴參與者自己的計劃在做什麼,子計畫一的計劃主要在漸凍人部分,收集資料以利資料庫建立,能更順利協助漸凍人的聲音保留。
除此之外,陽光基金會也跟我們說,以後可以做台語版的,因為目前長輩以台語為主。
20240901陽光基金會北區服務中心參與者招募說明會
感謝陽光基金會北區服務中心的邀約,今日張玉山院長到機構進行實體的研究計畫推廣與參與者招募。
張玉山院長首先透過計畫團隊製作的紀錄片,呈現研究宗旨與實際行動,張院長提及幾位研究參與者的經歷,說明我們期待透過科技輔具,陪伴發音障礙者在追求人生目標的過程中能更加順利。
接著張院長介紹四個子計畫的內容,並展示錄音系統操作方式,透過系統中收音來源與合成後語音的比較,讓現場聽眾們感受本團隊的技術成效。
在QA環節,感謝基金會社工踴躍提問並釐清本計畫架構,幫助現場參與者們更加理解研究方向,有位口友回饋寶貴想法,認為本計畫採用的錄音系統操作方便,只要有行動載具,不限時間、地點,都能在閒暇之餘進行錄音作業,彈性的參與模式能夠提升他加入研究的意願與可行性。
歡迎更多朋友的加入,加強系統資料的完整性,協助本計畫建立優質完備的科技發音輔具,和語言障礙者們一起「再聲」!
會議名稱:「數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣」第二年
第一場專業人員焦點團體座談會
會議時間:2024/09/07
九月七日於台北校區會議室舉辦本計劃2024第一場專業人員焦點團體座談會,感謝臺灣聽力語言學會、中華民國醫務社會工作協會、臺灣社會工作專業人員協會多位學者們,遠道而來參與會議,針對本計劃的研發、支持、推廣各面相皆提供許多寶貴建議,這大大幫助我們加強改善本計劃的AI科技輔具,使之更能貼近病友或障礙者的需要。
首先張玉山院長與江振宇副教授分別展示本團隊科技輔具的操作、介紹研發過程與技術,接著由林昭吟教授主持討論會議,蒐集各專家學者們從自身專業領域出發的獨到見解。
在會議過程中,多位學者分享自身研究經驗曾遭遇的困境及應對方式,與計畫主持人們交流語料建立過程的軟、硬體實作;有專家建議本計劃在未來發展過程中,能邀請更多語言專家、聽障朋友一同參與,帶入專業人員、輔具使用者不同角度的看見;許多來賓針對語言障礙者的現況提供專業資訊,包含倡議觀念的改變、各項指標檢篩的數據、自身與障礙者或機構的互動經驗;語言治療師們就臨床經驗提出實務現場的運作與需求;針對本計劃收音軟體的使用者端,有來賓認為若要考量認知功能困難的個案,輸入方式或許可再調整,期待可以更廣泛適用於不同群體;也有來賓就推廣面向提供想法,分享自己曾見過的國外案例,提議可用活潑的展演方式,例如使用者透過科技輔具發聲進行脫口秀、演講,受眾不僅是服務對象與學界,也能讓本計畫進入更多大眾的視野。
十分感謝與會專家們熱絡地給予回饋,每一個來自不同專業領域的聲音都能幫助本計劃團隊走得更遠且穩健。
會議名稱:子計畫三及子計畫四系統第一次會議
會議時間:2024年9月13日
張玉山院長和包容科技子計畫三、四團隊以實體方式進行會議,了解子計畫三目前計畫執行上遇到的困難,需要子計畫四成員協助的地方。
更了解子計畫三目前的工作進度,而官方line帳號回答民眾問題,目前也在測試階段。
期許子計畫三能夠利用技術將民眾的疑問都能利用官方帳號回覆,而子計畫四則是協助子計畫三與不同機構合作,能夠將民眾的問題給予更精準的回覆。
會議名稱:子計畫三及子計畫四系統第二次會議
會議時間:2024年9月27日
張玉山院長和包容科技子計畫三、四團隊以實體方式進行會議,子計畫三一開始先展現自己與上次開會時的不同的進度。
子計畫三目前運用的系統技術使官方line帳號的回覆速度及準確度都有比第一次開會來得高。而若問的問題官方帳號無法回答,系統會告知使用民眾系統無法回答。
目前會把LINE Bot(聊天機器人)開放給合作單位測試,並蒐集問題,以利未來改善調整系統。再藉由子計畫四與不同機構的合作時,推廣LINE Bot做更廣泛的測試與使用,希望未來能使系統更精確地回答問題,並提供24小時的服務。
會議時間:2024/10/5 10:00
會議名稱:子一知情同意書及錄音系統線上說明會
會議一開始,由昭吟老師說明子一與子四的知情同意書注意事項,例如研究目的、收音方式、計費方式。
接著由振宇老師展示錄音系統操作。從註冊、系統功能介紹、各式語句收錄示範,各步驟慢慢講解,過程中參與者們也踴躍提問,還開心地在聊天室回報註冊情形。
感謝參與者們付出寶貴時間與心力參與本研究!
會議時間:2024/10/5 10:30
會議名稱:第一次語言障礙者焦點團體座談會
座談會一開始,先由林昭吟老師為我們做開頭暖身,再由張玉山老師為我們做子計畫二的介紹,使語言障礙者了解我們的計畫。
介紹完計畫後,我們請與會者分享自身經歷,是否有用過其他的溝通輔具,有些與會者沒有用過,主要是因為自己還沒那麼嚴重,目前還能正常溝通。
有與會者則分享自己上班時因為構音障礙,無法與人準確溝通,而遭受挫折。
張玉山老師則分享子計畫二可以解決構音障礙的問題,只不過需要收錄足夠的音,才能夠完整辨識不同的音。使有構音障礙的朋友,能夠利用我們的輔具與其他人正常溝通。
我們的子計畫二,利用EZTalk協助構音障礙者正常的講話,雖然準確度還有改進的空間,不過看到可以讓二位構音障礙者利用同一個系統對話,我們計畫已經又邁向一大步。現在只要能降低收音的數量,而且可以達到不錯的語音辨識度,透過GAI將足夠多的語料輸入後,就可以讓有這方面的人使用了!
會議名稱:子四內部工作會議--焦點座談會籌備
會議時間:20241009
本次會議主要針對未來專業團體焦點座談會羅列邀約名單、規劃會議期程,老師與助理們討論、了解各個團體的專業領域與本研究的關聯性,期待未來有機會與專家學者們交流合作!
同時子四人員們也討論未來研究進行方向、可改善之處,構想子計畫間可以如何協力互助,推動研究持續進行。
會議名稱:工作討論會議
會議時間:2024/10/5 10:30
會議主要討論了「包容科技計畫成果發表會」的準備工作,包括成果展和座談會的報告內容。特別探討了佈置成果展示區所需的海報設計與內容。此外,還探討了老師們是否有意願申請第二期「子計畫二徵件」的相關細節,以確保計畫的延續性和擴展性。
還針對未來如何招募更多計畫參與者進行討論,,並研究如何優化 錄音費用的安排。目的是找出計畫可改善的之處,以提升計畫執行的效率與影響力,並推動研究工作的持續進展,確保計畫在未來能夠順利推進,達到預期目標。
20241012 參加無喉者復聲協會會員大會暨演講比賽
2024年10月12日(週六)本計畫成員江振宇老師、林昭吟老師特別南下高雄榮民總醫院參加無喉者復聲協會會員大會暨第三屆演講比賽。當天活動首先由朱本元理事長主持理監事會及會員大會,接著由高雄榮總陳柏甫醫師進行醫學講座,主題為「癌症病患需注意的治療和日常照護」,協助喉癌患者於術前及術後如何做好自我照顧。接著是眾人期待的演講比賽登場,分成使用食道語兩年以下、兩年到五年、五年以上等三組,以及氣動式人工講話器一組。最終由專業的語言治療師評選出優勝者,並在該協會「無聲之音合唱團」的演唱後結束當天活動。
無喉者協會有六位伙伴參與子計畫一的收音,但由於每個人損傷狀況不同,所以語言障礙程度也不太一樣。在活動中場間,病友們熱絡地以食道語或各式輔具打招呼或互相問候,也交換各種輔具使用經驗。例如有些病友使用食道語溝通,但由於發聲部位與一般人不同,發出的聲音也比較模糊,音量也比較小,不過有病友認為手術後能再度講話,就感到很高興。也有病友使用氣動式輔具,雖然比較容易上手,但其類似擴音器的功能,使人失去講俏俏話的樂趣。也有病友分享電子喉嚨發聲器,使用起來更方便,可是發出的聲音類似機器人講話,價格也較高,每支約為3~4萬元。
當天演講比賽的主題為「我的休閒生活」,病友們逐步復原之後,仍然四處遊山玩水,甚至更重視個人健康保健。此外,許多病友表示持續復健的最大動力,是來自於家人的鼓勵。因此當天有不少病友帶著親友團前來參加大會並見證個人復原之後,不但可以與人溝通,更可以上台演講、合唱,著實令人感動不已。
本計畫為關於語言障礙者之語音保存、語音辨識的技術開發,子計畫一江振宇老師表示,對於有些使用食道語的病友,或許可以試著以AI技術將說話中穿插的氣音、雜音、不該有的頓音消除,但這個任務可能還需要一段時間進行研發。
2024/10/30(三)國科會「以包容為導向之科技計畫」113年度成果發表會
本計畫於10/30(三)參與國科會113年度成果發表記者會,在這次發表會上,我們熱情地向大家展示了『AI科技協助語言障礙者溝通輔具』的最新進展與成果!
我們深信,每個人都應擁有自由表達自我、分享想法的權利。為了實現這個理想,我們運用AI科技,持續打破溝通的限制,為構音障礙者創造多元而自由的溝通選擇。這條道路雖然充滿挑戰,但來自各界朋友的支持與肯定讓我們更加堅定,也讓這條路充滿溫暖與力量。
我們特別感謝每位撥冗蒞臨的嘉賓:漸凍人協會社工部的蘇麗梅主任、漸凍人協會秘書長趙泰銘、中華民國腦性麻痺協會的常務理事林慧子及秘書處主任翁淑芬,以及當天前來熱情交流、諮詢的每一位朋友。您們的鼓勵與認可是我們不斷前行的動力!
未來,我們希望能繼續利用AI科技,為語言障礙者開創更廣闊的溝通天地。讓科技成為支持溝通的橋樑,使每個聲音都能被傾聽與理解,真正關懷每一位需要支持的人。期待在各界的共同努力下,攜手為構音障礙者築起無障礙的溝通世界,共創包容的未來!
分享本團隊接受「數位時代」採訪新聞。
【6個人已經無法說話!台北大學20名師生「努力做不賺錢的事」:讓AI幫語言障礙者說話】
https://www.bnext.com.tw/article/81268/aiit-ntpu?
分享本團隊接受「天下雜誌」採訪新聞。
【口渴、想上廁所卻沒人聽懂 台北大學身障生參加這項研發,讓對話不用猜】
https://www.cw.com.tw/article/5132648?fbclid=IwY2xjawGnjpxleHRuA2FlbQIxMQABHS0rq0TBV0Z3LQFq1wbthWrrWNsxMJEuSyIOpkwbWsIHw1lq4O5V_XCqRw_aem_MFTzlwMERBmQPrPkP0LI6A
11/19 早上10:00,昭吟老師、予安老師與劉女士進行本研究參與者之線上個別訪談。
劉女士分享身為回聲計畫參與者的輔具使用經驗、障礙者生命經歷,並提出對於錄音系統的建議。
劉女士說,操作錄音系統一陣子後,他發現自己咬字變得清晰、說話方式變得和緩,在老師們詢問下,劉女士回想背後原因,原來在錄音過程中,為了收音清楚,劉女士會放慢語速,同時模仿系統中AI的語調、咬字,某次劉女士參加高中同學會時,身邊認識多年的朋友驚喜地說:「你說話好清楚啊!」不知不覺透過頻繁練習,發現自己的進步。
劉女士也分享了從校園到職場,因障礙者身份遭受排擠的經驗,另外某次就醫時,在快節奏的醫療場域,因劉女士說話較慢,沒能來得及完整訴說自己的症狀,醫生就匆匆開了另一種止消炎藥給劉女士。「如果能早點有科技輔具的協助就好了!」劉女士說。消弭語言障礙者的日常困境,正是本研究看見的需求並努力的方向。
在言談中,劉女士頻頻提到希望能用自己的力量帶給障礙者朋友更多資源,並根據自身使用本計畫輔具的經驗,鼓勵語言障礙者兒童多說多練習,找到自信。可以感覺到劉女士熱心大方的個人特質,也感受到她對於障礙者的關懷。我們也聊到劉女士從被照顧者到照顧者的身份轉變,劉女士不斷說自己是很幸運的人,身為聽眾,我能看見其實劉女士也透過努力,帶給身邊的人幸福。
謝謝劉女士的無私分享,讓我們知道回聲計畫的推動過程中,不僅建置語音資料庫,也達到促進語言障礙者練習口語表達的附加效果,這對我們來說是很大的鼓舞。
【訪問題綱】
一、接觸AI輔具(回聲計畫)的經驗
1.您認為回聲計畫和其他輔助工具有什麽不同?
二、使用過程中的感受與挑戰
1.您覺得回聲計畫操作起來容易嗎?在操作過程中遇到了哪些困難?
2.回聲計畫是否能精準識別或理解您的語言需求?有沒有誤判的情況?
3.在什麽情況下,回聲計畫最能幫助您?有哪些時候覺得回聲計畫幫不上忙?
三、對日常生活的影響
1.回聲計畫有沒有幫助您更好地與他人溝通?請舉例說明。
2.您覺得使用回聲計畫後,您的生活品質有提升嗎?在哪些方面有所改善?
四、改進建議與未來期待
1.您對這類AI輔具有什麽改進建議嗎?有哪些功能您覺得可以更好?
2.您對未來AI輔助技術的發展有什麽期待?
3.您認為未來的AI科技可以在哪些方面進一步改善語言障礙者的生活?
會議名稱:「數位支持、溝通無礙:AI科技協助語言障礙者溝通輔具之研發、支持與推廣」第二年第二場專業人員焦點團體座談會
會議時間:2024/11/22
十一月二十二日於台北校區會議室舉辦本計劃2024第二場專業人員焦點團體座談會,感謝臺灣ICF研究學會、臺灣藝術治療學會、中華民國腦性麻痺協會、臺灣社會工作專業人員協會多位學者們,遠道而來參與會議,針對本計劃的研發、支持、推廣各面相皆提供許多寶貴建議,這大大幫助我們加強改善本計劃的AI科技輔具,使之更能貼近病友或障礙者的需要。
首先林昭吟老師先和與會者介紹本計劃,接著張玉山院長與我們介紹子計畫二的技術,說明目前收音的方式及目前的收音成果,與與會專家分享,與會專家也給予我們不同的反饋和意見,說明如何使這個計畫更加進步,也可以開放至12歲以下,在孩童學習認知方面也能一同進步。
在會議過程中,林昭吟老師分享有位計劃參與者他在參與計畫錄音過程中,不是只有單純錄音,反而在錄音過程中慢慢的咬字變的更清晰,其他與會專家也分享其對這位參與者的看法。並表示認同跟驚喜,因此與會專家希望我們能夠加入不同的東西至錄音網站或開放年齡更小的孩子做使用,因為有些成年的使用者比起利用中介平台溝通其實利用打字溝通更迅速。
再次感謝與會專家們熱絡地給予回饋。
2024/11/30 「生命週期中的照顧需求與挑戰」學術研討會
本計畫子計畫四主持人林昭吟老師於2024/11/30日參加台灣社會政策學會與國立暨南國際大學社會政策與社會工作學系舉辦的「生命週期中的照顧需求與挑戰」學術研討會,並於「照顧科技」場次與多位專家學者交流分享科技如何落實於照顧議題,包含對於家庭照顧者的「互助喘息」服務、將科技運用於獨居長者送餐服務、由機構觀點思考導入科技照顧的期待與擔憂、以及AI科技如何協助障礙者溝通無礙。與會50多位學者、專家、學生、實務工作者對於前述主題都相當關注,也提出許多寶貴意見,值得我們進一步深思。
本計畫團隊接受政大之聲的採訪,內容包含包容科技其他的計畫,對於本團隊有部份的且正向的報導,對本計畫的推廣是正向的。
會議時間:2024/12/12 14:00
會議名稱:子計畫二系統語音模型測試線上說明會
會議一開始,由昭吟老師進行開場白,接著則是張玉山院長為我們介紹如何測試模型,院長表示雖然收音及測試系統為同一個網頁,但在操作方面還是存有差異。
過程中,張院長說明目前的模型有進步,除了速度變快、準確率變高,最重要的部分是有抗雜音,故就算在吵雜的環境中也能正常使用。
而與會者在測試過程中也提出許多問題,如測試系統是否可在測試後有明確的指示、此模型與前模型的功能差異等,希望透過詢問減少操作上的錯誤,並能在使用上更加順暢。
未來也會嘗試將語音模型轉換成應用程式,期望參與者能夠多參加測試,以利我們改善語音模型,並讓使用者能更加容易理解!
感謝各位參與者付出寶貴時間與心力參與本研究!
2024/12/1【台灣聽力語言學會113年度會員大會暨學術研討會】
江振宇老師將於本次會議中演講「VoiceBank 語音銀行」主題, 介紹VoiceBank網站 (https://voicebank.ce.ntpu.edu.tw/)所提供的功能,特別提供漸凍症病友「語音銀行」與「語音系統」的功能。
「語音銀行」提供病友錄存語音的平台
「語音系統」提供病友客製化文字轉語音系統的服務,讓病友於系統使用輔具輸入文字後,可以用具有自己語音音色的合成語音輔助與人溝通。
本次演講將介紹 VoiceBank 網站的各項功能、發展過程、使用者回饋、目前工作進展、以及未來發展方向,期望藉由此次演講,讓更多學者認識 VoiceBank,共同推動相關領域的進步與合作。
活動資訊:
https://www.slh.org.tw/index.php?do=news&tpid=4&pid=41&id=5284&listp=
會議名稱:第三場專業人員焦點團體座談會
會議時間:113年12月20日(五)
今日下午2時,本計畫於台北校區教學大樓6樓社工系會議室舉辦了本年度第三場專業人員焦點團體座談會。此次會議由社工系林昭吟教授主持。會議開始,林教授簡要介紹了計畫內容,並分享計畫獲多家媒體關注的情況,說明舉辦此次座談的目的是透過輔具中心與社福團體推廣計畫成果。林教授逐一介紹與會者後,大家共同觀看由國科會拍攝的相關影片及ezTalk錄音系統的使用案例。
接著,張玉山院長的學生介紹了子計畫二的ezTalk錄音系統,展示語音辨識模型及個案訓練準確度成果。腦麻協會黃春賢董事長參與了模型測試,但也指出,由於語音模型具個人化特質,無法共用同一帳號,未來需探索更靈活的解決方案。同時,學習障礙協會劉永寧理事長建議,是否能根據聲音特質分區塊,讓類似的使用者共享模型資源。
子計畫一主持人江老師介紹了新版錄音系統(VoiceBank)及其錄音介面,展示語音保存成果與克服困難的技術發展方向,例如讓漸凍症患者實現錄音後的自動語音合成。江老師表示,未來希望統計不同語障程度及性別分布,進一步優化系統功能。
臺灣師範大學吳亭芳與廖靜宜老師則分享了語言治療的需求與個案經驗,指出患者更希望能保留自己的聲音,代替現有的罐頭音或電腦音。同時,他們建議,未來系統可引入AAC(輔助與替代溝通)功能,滿足患者表達複雜句子的需求,並探索手機及平板版本的應用場景。
腦麻協會黃春賢董事長強調,語言障礙患者表達自身需求的能力對生命意義與社會安定性有重要作用,希望AI技術能加速這些支持的實現。何麗梅執行長則分享一位腦性麻痹患者在學術研究中的挑戰,呼籲研究團隊提供更多語言支持的解決方案。
醫務社工協會林家德副秘書長也提到,AI技術應用於患者生命末期的自主表達,具有極大的發展潛力,例如在善終決策中的溝通需求。此外,錄音保存與語音克隆的前置作業也被認為是患者病前重要的準備階段,需加強宣導。
臺灣藝術治療學會邱韻哲秘書長則提到,這項技術也非常適合用於腦性麻痺患者,幫助他們更有效地進行溝通。關於錄音的應用,他分享了一個案例:自閉症患者透過與 Siri 聊天,逐漸開始主動說話。許多患者在特定場景下可能會抗拒講話,認為這樣會感到丟臉。如果能有一款軟體,讓他們在想說話時自由表達,並提供互動聊天的模式,不僅能幫助理清表達內容,還能讓周圍的人更明白他們的想法。最後,他還分享了一個由身體障礙與心理障礙者組成的團體案例。團體中的每個人都希望能表達自己,但卻常各說各話,難以清楚傳達想法。他期望 AI 技術能協助這些群體更加精準地表達自己的意念,提升溝通的效率和效果。
此次座談會為語言障礙患者提供了更多支持與解決的思路,透過AI技術的進步,期望能改善患者的溝通能力,提升他們的生活質量與自主性。未來,研究團隊將持續推動相關技術,為語障者群體提供更全面的語言解決方案。
與有榮焉 - 我們的研究計劃在以下國科會專題裡面也有一篇報導。
「談觀點 - 打開沈默的門 AI如何改寫語言障礙者的溝通未來」
會議名稱:子四內部工作會議--回顧與展望
會議時間:20241230
本次會議主要針對期末報告去做分工,老師及助理們去了解自己要做的工作內容,以利後續做分析及統整各界對於不同子計畫的回饋,使我們能加強模型的功能。
會議名稱:協力夥伴工作分享線上座談會
會議時間:2015/01/09 AM10:00
謝謝八里愛心教養院鄭欣宜治療師、中華民國腦性麻痺協會翁淑芬主任、中華民國無喉者復聲協會張其忠副秘書長、漸凍人協會蘇麗梅主任及謝孝慈社工督導,幾位協力夥伴的上線參與。
計畫主持人們提及,研究剛起步之時,多虧諸多單位的協助推廣、招募、陪伴,我們才得以認識多位研究參與者,蒐集大家的語料,使系統更完善。
本次討論當中,夥伴們提供自己身為系統使用者、協助操作者的看見與體會,認為本計畫收音系統有助使用者練習發聲、拓展人際互動的可能性、甚至有參與者預計借構音系統之力發音以備考研究所;同時針對操作面向,大家也回饋許多優化的建議,像是網路穩定性、錄製教學影片以利使用者理解……等等。
很榮幸可以得知本研究對於提升參與者的生活品質有正向的影響,也很感謝一路走來各單位的夥伴們投入心力促成本研究的推進,我們會將夥伴們的回饋放在心上,作為持續邁進的方向。
2025/01/13第四次拜訪八里愛心教養院
今日張院長與計畫助理到訪八里愛心教養院,關心院生錄音情形、測試語言模型。
在院生們錄音過程中,可以觀察到,兩位院生會因為聽見彼此的錄音內容(例如:我要留長髮、我想吃蛋餅),而產生歡笑、對話的互動,收音系統的目標是為促進語言障礙者與人對話順暢,意外發現,在建置過程中,收音系統已成為研究參與者開口說話的一大契機,協助院生收音的治療師欣宜也向我們回饋,透過錄音,院生間產生人際交流、變得活潑,錄音也發揮練習功能,改善院生的語言發展。
謝謝八里愛心教養院謝院長、諸多專業同仁的支持相伴,讓錄音系統得以持續精進。
【跨國連結,推動無障礙科技技術】
114年1月15日,AIITNTPU計畫的共同主持人林予安老師拜訪了華盛頓大學的四位專家,包括Shyam Gollakota教授(Head of the Mobile Intelligence Lab)、Stephen Meyers教授(Director, Center for Global Studies)、Mark Harniss教授(Director of the Center for Technology & Disability Studies)和Jen Mankoff教授(the Founding Co-Director of CREATE (Center for Research and Education on Accessible Technology and Experiences)),並向他們介紹了計畫進展與成果。此次訪問獲得熱烈回應,專家們不僅表達了對研究的濃厚興趣,並表達了未來合作的意願。
其中,Shyam Gollakota教授的研究方向與AIITNTPU計畫的目標高度契合。他專注於開發即時翻譯耳機與AI助聽器等技術,致力於提升語言障礙者的溝通能力。Shyam教授提到,目前已使用來自UIUC Beckman Institute的Speech Accessibility Project資料,該資料庫包含發音困難者的20-30小時語料。對我們語料庫的規模與參與人數充滿好奇,並提出了未來合作的可能性,期待透過資源整合與技術分享,共同提升語音辨識的準確度與效能。
這次跨國交流的價值不僅體現在知識的碰撞,更為無障礙科技的未來發展鋪設了合作的基石。透過國際間的資源共享與創新推動,這項計畫將進一步提升語言障礙者的生活品質,同時為科技助力無障礙溝通樹立典範。未來,我們期待在全球合作的力量下,持續推動語音輔助科技的進步,創造更多突破性的成果,進一步改善語言障礙者的溝通體驗,並實現科技無障礙的美好願景,讓科技的關懷延伸至更多需要幫助的角落。
【114學年度與會財團法人瑪麗亞社會福利基金會附設瑪麗亞學園會議記錄】
壹、時 間:114年1月14日上午10時30分
貳、地點:瑪麗亞學園會議室(3F)
參、主持人:江振宇教授、李琇菁主任
肆、出席人員:江振宇教授、李琇菁主任、林浩棟博士、王則仁、張朝凱
伍、討論事項:研究計畫討論
議題、展示近期研究計畫
|江振宇教授:此次出席與瑪利亞學園李琇菁主任討論產學合作相關事宜,展示實驗室的成果,並討論如何將成果運用於瑪麗亞學園,利用科技協助語言治療師,簡化工作內容。
|王則仁:在此次會議中,展示近期的實驗內容,主要在於展示語音辨識與語者標示的細節,並於會議中討論如何將這兩套系統運用於構音障礙中,此次討論將辨認後的結果以praat的形式一併展示,同時展示了語音辨識結果、語者標示結果、頻譜圖、波形圖,其中,語音辨識的結果是以Whisper模型進行轉錄,以音檔作為輸入,得到語者轉錄的文本為輸出。語者標示則是以pyannote-audio為模型,以音檔作為輸入,得到音檔中各語者標記的輸出文本。
|李琇菁主任:我希望透過對語音辨識與語者標示這兩個系統進行改良,首先,能標記出目標語者,並針對目標語者整段話中找到目標語句,最後能提取出來目標語句,如果這個系統成功,將大大提高語言治療師在診斷時的工作效率。也希望未來若有機會,能研發出一套line robot,使用者於line上錄音後,機器人會給予回饋判斷此使用者為何種構音障礙,若構音障礙ㄊ過於嚴重,會通知使用者洽詢語言治療師做診療。
|江振宇教授:第一項計劃如果能降低辨識的CER以及語者標示的DER,就可以做到提取目標語句供使用者運用,但目前的模型對於時間點的精準度還沒有那麼高,還需要我和學生去優化,在李主任提出的第二項計劃中,難點可能在於line輸出的音檔為16000Hz取樣率的m4a壓縮檔,品質對模型上來說可能是一大挑戰,目前先著重在於透過模型去判別為何種構音障礙,將精準度提高。
|林浩棟博士:語者標示的系統應該是從FFT轉頻率軸後去做處理,或許可以從頻率軸下手去優化模型。第二,或許可以在園區建立伺服器,可以更方便於online robot工具的建立。
|張朝凱:將語音擋切割至音素,分析語障者音素的錯誤點,提出音素對於語障者矯正的初步想法。
|李琇菁主任:辨識語音有時會自動矯正念出的音檔,無法確認患者念的是否正確,提出資料導向式的測試方式,設計語料並記錄與者的錯誤資料,分析出語者哪部分錯誤,舉例來說,ㄊ的音語障者會將其發成ㄎ,那透過資料導向式的測試方式可以初步紀錄語障者那些音素是發不好或是錯誤的。
|江振宇教授:提出對於模型的看法,以及建議,發音位置、音高等等對於判斷的影響,也和學生們講解未來模型建構過程中可能會引發的問題與解決方向。
|林浩棟博士:發音錯誤的話如果錯誤的字會有意義,如兔子念成褲子,該怎麼判斷,會不會影響到,詞語的資料庫可以透過連結gpt做成資料庫。
|張朝凱:語音辨識會透過自動上下文矯正念出的音檔,如:一二三四五,四如果念成ㄕˋ,語音會自動校正,所以設計文本時詞語可能需要瑣碎一點。
陸、散會時間:下午2時05分
子計劃二目前測試有上線測試者,整體測試的SAR(Sentence Accurate Rate,整個句子完全對,沒有一個字錯誤的比率)可以高達78%,也就是說對於語障者的說話,我們的系統平均5個句子可以完全翻譯出來的有4個句子。而平均的CER(Character Error Rate,我們定義成字的錯誤率),只有12%。也就是說10個字只有錯1.2個字,只要修正1.2個字。在所有的測試中,我們並沒有給他們任何的測試句子,都是隨便他們講,以期望達到真正的Free Talk。由此可見,這個系統只要所有的語障者努力的收音,要達到跟別人可以自由的對談,應該不是問題。
我們期望大家努力的收音,並且測試,我們相信,講話別人聽得懂是可以預期的。
✨ 感謝國家科學及技術委員會的支持! ✨
我們的計畫非常榮幸獲得國家科學及技術委員會的協助,特別感謝 科技魅癮 Charming Scitech 團隊的專業與用心,為我們製作了一支精彩的影片。這支影片充滿溫度與希望,傳遞了科技關懷的力量!
📽️ 誠摯邀請大家一起欣賞這支影片,感受科技帶來的感動,並分享這份希望與愛心。
👉 https://youtu.be/lPo9g9f803E
#科技魅癮 #科技助力無障礙 #感謝支持 #傳遞希望
【感謝媒體報導】
我們的計畫再次獲得媒體關注! 這次的報導介紹了我們如何運用科技,幫助語言障礙者突破溝通限制,提升生活品質。
感謝Yahoo奇摩新聞的報導,也感謝所有參與者與夥伴的支持與努力! 讓我們一起持續推動無障礙包容科技,讓每個人都能自由表達自己的想法與情感。
新聞連結:
會議名稱:子四個案深度訪談前置會議
會議時間:2025/02/17
本計畫個案訪談知情同意書及訪談大綱已通過師大倫審會的審查, 子四計畫人員們針對接下來將執行的訪談作業、大規模收音進行細部討論。
包含盤點計畫參與者們的投入情形、回顧過往的招募經驗、反思逐字稿整理方式,希望能讓計畫進行得順遂,感謝參與者及協力夥伴的協助!
活動名稱:子一研究參與者校內招募
活動日期:2025/03/18
本研究近期於北大校內發布參與者招募公告,今日中午,由昭吟老師、振宇老師主講,分別介紹子計畫一的研究內容與實行方式、示範收音系統操作。
同學們認真聽講,並於會後紛紛填寫子一同意書,感謝大家的參與,期待往後與大家合作。
訪談分享 & 學習模型測試
📅 活動時間:114年 3月22日(六)10:00-13:00
📍 活動地點:文化中心B教室(高雄市新興區和平一路199號12樓)
本次活動由張玉山院長及其研究助理負責指導參與者學習如何使用模型測試系統,而林昭吟老師、林予安老師及其研究助理則負責訪談,探討語音輔具的使用經驗、挑戰與未來發展建議。
多數使用者透過陽光基金會得知計畫並參與測試,他們普遍認為輔具有助於改善發音、提升溝通能力,並減少因語言障礙帶來的社交困難。
許多參與者因手術後出現語言障礙,希望透過此計畫改善發音與溝通能力。在錄音過程中,他們透過持續練習發音與聆聽自己的聲音,使咬字逐漸清晰,相較於手術初期的發音狀況已有明顯進步。
使用者回饋
輔具的優點:
•幫助發音練習與矯正,提升語音表達能力。
•提供溝通工具,減少與他人交流時的不便。
使用上的挑戰:
•辨識準確度不太穩定、系統運行不夠流暢,會影響使用體驗。
•希望能增加使用數據回饋(如錄製字數、辨識成功率、重複錄製 次數等)。
•部分受訪者認為 Google 語音辨識的準確度較高,建議輔具參考其技術進行優化。
未來期望
開發 App 版本,提升使用便利性。
優化 AI 辨識技術,提高辨識準確度,並增強對特殊發音的識別能力。
擴大服務範圍,幫助更多有語言障礙的人受益。
最後,部分使用者表示,即使計畫結束仍會持續使用輔具作為日常發音練習工具,但也有部分因生活或職場需求,未來使用頻率可能減少。此外,受訪者對陽光基金會的社工深表感謝,當遇到問題時,他們首先會向社工尋求協助,而社工們總是熱心解答,幫助他們順利使用輔具並持續練習發音。
這些寶貴的訪談回饋將作為語音輔具優化與推廣的重要參考,我們也將持續改進,以提升使用體驗與實用性。感謝所有參與者的支持與分享!
【2025年4月8日|討論期中考評意見回覆會議】
4月8日上午10點,召開「期中考評意見回覆建議」討論會。老師們針對國科會給予的寶貴建議逐項回應與反思,深入討論未來改進與調整方向,並積極提出補充資料與修正建議。
會後我們將依據討論結果進一步整合意見,以確保後續回覆內容更更加具體且具有說服力。
感謝每一位參與討論的老師!
📣【「子計畫一」一般研究參與者校內招募線上說明會】
📅 活動時間:2025/04/22(週二)下午16:10-17:00
今日下午,我們舉辦了「子計畫一」的校內招募線上說明會,邀請到林昭吟老師與江振宇老師向同學們介紹研究背景、參與方式,並進行語音收音系統的操作示範。
🎙️ 子計畫一聚焦於語音合成技術的研究,希望透過蒐集大量語音資料,建立語音資料庫,進而運用AI技術幫助漸凍人或失語者「找回自己的聲音」。
👂 我們誠摯邀請同學們捐獻聲音,這些聲音將來可能協助語言障礙者透過合成語音發聲,或被應用在更精準的語音輔具系統中。
📈 錄製越多語音,語音合成聲音的系統越精準,能提供更自然的合成效果,幫助病友在更多場域順利表達需求。
🙏感謝每一位報名與參與的同學,期待未來能與大家攜手合作,為需要發聲的人帶來希望,捐獻語音、貢獻一份溫暖的力量!
📣 感謝大愛新聞的採訪
感動分享|邀您一起來看大愛新聞報導 《身障博士開發 ezTalk 為言語障礙發聲》
「每一個靜默的靈魂,都值得被聽見。」
「即使言語受限,也有權利表達想法。」
「讓每個想說話的人,都能被聽見。」
身障博士黃瀚勳,憑藉自身經歷語言受限的體會,攜手張玉山教授,共同開發出「ezTalk」溝通輔具。透過AI科技,他們為語言障礙者開啟了一扇能自在表達的大門,讓沉默不再是障礙,而是另一種力量的綻放。
因為懂得,所以更加堅持。
在這條路上,我們也持續努力。
本計畫團隊致力於從語音資料收集、模型訓練到輔具開發,期望運用AI與語音科技,研發出真正貼近使用者需求的溝通工具。只為讓每一位渴望表達的人,都能擁有屬於自己的「聲音」,勇敢發聲,無礙溝通。
用科技延伸愛,用溝通連結世界。
衷心感謝每一位參與者與支持者,因為有您們的陪伴,我們能共同為發聲者帶來更多的希望。
📣 參加【2025年台灣社會福利學會及台灣社會工作教育學會聯合年會暨國際學術研討會】
活動時間:2025年5月2日(五)
⠀
我們的計畫團隊非常榮幸能參與「2025年台灣社會福利學會暨台灣社會工作教育學會聯合年會暨國際學術研討會」。活動現場約有50位來自全台各地的學者、社工實務工作者及研究人員共同交流。
⠀
在此次研討會中,我們展示了計畫的核心理念與執行成果,透過海報展示與紅布條宣傳,向與會者介紹我們如何運用 AI 科技開發溝通輔具,幫助語言障礙者突破表達限制,找回屬於自己的聲音。
⠀
這次參與不僅讓更多人認識我們的計畫,也讓我們獲得了許多建議與鼓勵,也拓展了潛在跨域合作的可能性。
⠀
🌱 我們相信,科技的力量不只帶來創新,更能成為包容與理解的橋樑。
讓每一位渴望表達的人都能「被理解」、「能發聲」,正是我們持續努力的方向。
⠀
💡 誠摯感謝每一位參與支持的夥伴,因為有你們,我們在前行的路上,看見更多希望與可能!
⠀
#AI溝通輔具 #語言障礙支持 #社會福利年會 #科技共融 #無礙溝通
🗣【共同討論計畫經費分配與未來執行方向】🗣
今天早上 09:30,我們在電資學院召開了「包容科技計畫」工作會議,由張玉山院長召集,邀集了各子計畫的老師們,一起討論經費分配方式,以及分享各自接下來的工作規劃。
這場會議的重點是讓大家更清楚彼此的需求、目標和挑戰,在有限的資源下找到最有效的分配方式,讓整個計畫更順利推進!
感謝每位老師與團隊夥伴的參與,我們繼續努力前進中🚀
讓科技成為每個需要它的人都能夠接近的力量!💡
#包容科技計畫 #跨領域合作 #溝通無礙 #研究日常 #協作前行
📣【參加 ICIM2025|展示計畫成果與推廣計畫 🎉】
我們團隊參加了 第36屆國際資訊管理學術研討會(ICIM 2025),在現場設攤展出本計畫的核心理念與階段性成果,向來自全國的師生與專家介紹我們的研究內容!
透過參與這樣的大型學術展覽活動,不僅讓更多人認識我們的研究方向與價值,也大大提升了本計畫的社會能見度與實務影響力。這次擺攤宣傳,更是一次絕佳機會,讓我們能夠把研究「說給外界聽」,進一步推動跨領域的交流與合作!
📍我們相信:計畫的價值不只在於研究本身,更在於讓研究被看見、被理解、被應用。
✨感謝每一位來到攤位前聊天、發問、索取資料的朋友,也誠摯邀請大家繼續關注我們的計畫進展喔🙌
#ICIM2025 #資訊管理研討會 #研究推廣 #擺攤宣傳 #跨域交流 #學術應用 #科技與社會 #NTPU #研究計畫成果展
📍 【出席總計畫辦公室工作會報|攜手同行,一起前進】
我們的計畫團隊於6月6日出席「總計畫辦公室工作會報」,與來自各子計畫的執行團隊齊聚一堂,分享階段成果、交流執行經驗,並共同討論後續推廣策略。
在此次會議中,我們報告了近期的執行進度、技術應用成果與校園招募情形,並分享了參與校外學術研討會、語音捐獻說明會等推廣經驗,以及未來工作規劃與目標方向。
🌱 與其他團隊的交流不僅帶來靈感,更是一種力量的交換。每一份回饋、每一個點頭與鼓勵,都讓我們更加堅定初衷——研究的價值,不僅在於實驗室中的數據與技術,更在於它能走入社會、回應真實需求,成為改變現實希望的種子。
✨ 一步一腳印地前行,我們相信,合作的力量會讓這個計畫走得更遠、走得更穩。也感謝一路上與我們並肩前行的每一位夥伴,我們將持續攜手努力,推動研究實踐落地,為溝通平權注入更多溫度與可能!
📢【招募研究參與者公告】
🎙️ 想試試看如何透過 AI 輔具「學會說話」嗎?
🗣️ 你的聲音,也能成為他人開口表達的希望!
國立臺北大學張玉山教授團隊現正招募研究參與者~
邀請你一起加入 AI 語音研究,協助我們打造能幫助語言障礙者自然溝通的 AI 輔具。
✅ 協助語音錄音+問卷回饋
✅ 資料匿名處理,安全保密
✅ 時間、地點可彈性安排
💡 花一點點時間,就能為語言平權帶來很大的改變!
📍 歡迎加入我們,一起為語言障礙者打造更友善的溝通環境。
💬 歡迎分享給身邊有興趣的朋友一起參與!
🔗 點此報名/了解詳情:https://docs.google.com/forms/d/e/1FAIpQLSefuO1KX0zvPLPJa3SFRKYReSr9CwpSop_dtNGWNsGd-ls4Bg/viewform?fbclid=IwY2xjawK9pu5leHRuA2FlbQIxMABicmlkETF0SFhGdDJuUUFnemFvNElmAR6M8oTopvmosLavdsxsvdf8ae0e2JFzLaYeaxy8an1Xx2-8iWmXqGIiDw2jTg_aem_o6ScSapmd7dtIMgIS3bfkQ
20250619 13:30-16:30參與桃園市北區輔具資源中心專業人員教育訓練
今天研究團隊四位老師及兩位助理一起前往桃園市北區輔具資源中心進行教育訓練。首先由計畫總主持人張玉山教授介紹本計畫以及子二的EZtalk語音辨識系統;其次由江振宇教授介紹子一的VoiceBank語音銀行;接著由戴敏育教授介紹子三的機器人客服系統,細說如何由商業模式移轉為社福團體模式;最後由林昭吟教授介紹本計畫的收案與推廣過程,以及受試者的特質及生活品質初步發現。
本次教育訓練課程相當受歡迎,報名人數約為17位學員,其中有8位職能治療師、1位物理治療師、2位驗光師、1位聽力師、1語言治療師、1位社工師、以及3位行政人員,實際到場學員還增加到21人。與會者對於各個子計畫都提出很棒的問題,也分享他們在醫院、學校等實務現場的觀察,建議我們可以將AI溝通輔具擴充應用到中風病人,以協助他們與醫護人員溝通;或者是協助國小階段的腦性麻痺小朋友,讓他們可以早點運用AI溝通輔具,幫助他們的學習與社交,進而促進社會融合。另外,桃園市北區輔具資源中心對於我們的機器人客服系統也有興趣,未來雙方可以合作建置輔具中心客服系統,由AI協助回答常見問題,例如申請輔具的資格,而讓有限的人力資源可以做更深度的服務或諮詢。
🔍 【個案深度訪談|傾聽真實需求,優化溝通輔具】
2025年6月18日(三)我們透過實地訪談語言障礙者及其照護者,深入了解他們在日常溝通中面臨的困難與期待。這些珍貴的第一手資料,幫助我們掌握語言障礙者的真實需求,為計畫注入使用者觀點,讓研發設計更貼近生活情境,提升輔具的實用性與親和力,同時也為後續的推廣與支持服務奠定堅實的基礎。
👉 有效溝通,從理解開始。期待讓 AI 科技成為每一位使用者溝通路上的最佳助力!
📢【參與擺攤 2025 年臺灣雲端與服務計算研討會(TWSC2 2025)|AI 科技 × 溝通輔具】
很開心今年能參與 2025 年臺灣雲端與服務計算研討會(TWSC2 2025)!我們的計畫也持續在現場設攤,與來自不同領域的學者、業界朋友及各校學生進行深入交流與分享。
這次展出,我們展示了語音資料標記流程、輔具設計理念,以及使用者回饋的應用實例,介紹本計畫如何透過 AI 科技協助語言障礙者克服溝通困難,讓科技更有溫度,為更多家庭帶來支持與希望。
🌱 感謝每一位前來攤位交流的朋友,您們的鼓勵與建議,是我們持續前進的重要動力!
👉 我們會持續努力,讓 AI 科技未來真正實現「溝通無礙」的願景。
#TWSC2025 #AIxAssistiveTech #語言障礙 #溝通輔具 #科技助人 #數位共融 #VoiceBank #溝通無礙
20250705 陽光歌手歌唱比賽
陽光基金會於上週六7/5舉辦第八屆陽光歌手歌唱比賽, 共有43位選手來自全國各地參賽, 其中有多位參賽者為本計畫的研究參與者. 歌唱比賽的主持人是八仙塵爆的傷友, 每位選手在演唱前都有自己的小故事, 也各自有親友團加油. 看著每位選手用生命唱歌, 雖然咬字不是那麼清楚, 但歌聲中的感情是令人動容的~~
20250720 【參與者訪談經驗分享】
今天張玉山院長及林昭吟老師前往高雄訪談,了解兩位參與者使用ezTalk的經驗和想法,而參與者面對我們的訪談也都使用ezTalk做回應,我們更從訪談過程中至後台查看數據找出ezTalk需要再改善的地方。
希望未來能將ezTalk的速度和準確度改善,讓口友們在與人溝通時能更有效率的對談!
非常謝謝兩位大哥用心參與計畫和願意分享在參與計畫遇到的經驗和想法!
🎤 【#回聲計畫|線上知情同意書與操作說明會】🗣️
時間:2025年7月29日(二)12:30 - 13:30
今天舉辦了子計畫一「回聲計畫」的線上知情同意書與系統操作說明會,由林昭吟老師與江振宇老師細心講解,協助參與者深入了解本計畫語音資料庫的理念與實際操作方式。
🔹 計畫旨在協助漸凍人、食道語或其他發聲困難者保留聲音,重現溝通的溫度。
🔹 參與者可透過 VoiceBank 網站錄製語料,產生具有個人化語音特色的數位合成語音。
🔹 感謝參與者的踴躍出席,熱絡交流!
我們期盼透過科技技術能持續為語言障礙者提供更多支持與可能💗
20250817 【子計畫二&子計畫四說明會】
今天張玉山院長及林昭吟老師在臺北大學民生校區和線上同步召開子計畫二&子計畫四說明會。
活動過程中,參與者們詢問自己不懂的地方,希望自己能更快上手ezTalk的使用方式,也和我們說明希望改善的地方。
我們也會聆聽大家意見去做改進及調整,謝謝大家願意參與計畫!歡迎大家與其他人分享本計劃aiitntpu!
「數位支持,溝通無礙」本年度第二波子計畫二說明會
2025 年 9 月 1 日(一)上午 10:30–12:00
高雄美麗島教室(高雄市苓雅區光華一路226號9樓)
今天在高雄美麗島教室以及線上同步舉辦了「數位支持,溝通無礙」本年度第二波子計畫二說明會!
子計畫二專注於為「嚴重吶語症」患者開發個人化語音辨識技術,並透過產品 ezTalk,協助患者用自己的聲音更快速、準確地表達想法。
活動中,張玉山老師與林昭吟老師詳細說明計畫與知情同意書內容,讓參與者們清楚了解研究目的與參與方式,參與者除了進一步認識 ezTalk 的功能與應用,也踴躍提出自身需求與建議,讓我們能持續優化系統、提供更貼近使用者的支持。
感謝大家今天的參與與分享
我們會持續傾聽與改進,讓溝通不再是障礙,也歡迎大家將本計畫分享給更多人知道!
「從使用者到共創者:數位科技開發的協作力量」分享會
時間:8月26日(二)13:30-16:00
地點:台中市新時代會議中心(大魯閣新時代購物中心9樓)
國科會「科技包容 智慧培力」團隊邀請本計畫與社福團體代表面對面分享開發與試用為語障者設計的語音辨識系統 ezTalk. 張玉山教授首先分享ezTalk的起源來自於想要和他語言障礙學生對話而來,同學因為有構音困難,需要很有耐心地和他對話,但由對話過程中也萌生運用先進AI科技開發客製化語音模型,希望讓構音障礙者可以透過AI科技辨識技術自由地與人對話。
林昭吟教授則介紹如何將此系統推廣至語言障礙社群,以及其中所面臨的困難及解決過程。目前ezTalk已有40多位語言障礙者參與試用,也協助多位語障者建構個人語音模型並持續使用中。
子計畫二說明會順利結束啦!!感謝各位的參與,現在讓我們一起回顧一下吧~
「數位支持,溝通無礙」子計畫二說明會
2025 年 10 月 4 日(六)10:00–12:00
國立臺北大學三峽校區
本次說明會由林昭吟老師與張玉山老師的助理介紹與示範,不僅詳細說明了研究目標與參與方式,更親自示範 ezTalk 系統的操作流程,讓大家能直接看到「個人化語音辨識」如何協助嚴重吶語症患者,透過自己的聲音清楚表達想法。
今天的兩位年輕參與者在家長陪同下出席,他們不僅專注聆聽,也帶來了充滿活力的互動,現場氣氛熱絡,師生與參與者之間的交流,讓我們更深刻感受到這項計畫的價值與未來可能。
謝謝今天每一位參與的朋友!
你們的回饋,將幫助我們持續優化 ezTalk,讓溝通不再是障礙,而是一座更堅實的橋樑。也歡迎更多人加入,和我們一起推動「數位支持,溝通無礙」的願景。
「連江縣早期療育社區資源中心合作會議」
2025年10月3日(五)上午10:00-11:00
線上會議
上週我們與連江縣早期療育社區資源中心進行了子計畫三的合作會議,針對「結合Line Bot的智能客服系統」進行交流與規劃。
子計畫三的核心目標,是透過AI技術降低早療服務過程的行政量與溝通門檻。希望藉由Line Bot的設計,突破時間與空間限制,讓民眾即使在下班或假日時,也能獲得正確資訊,同時協助社工與機構減輕行政負擔,騰出更多時間投入直接服務。
團隊也分享了技術特色:為避免AI使用造成資訊錯誤,我們將運用自行研發系統結合在地文本(如問答集、法規與服務流程),不僅提升準確度,也讓回應方式更貼近真人語氣,而非生硬的機械式回答。
感謝連江縣早療團隊的開放與投入,我們會持續依據在地需求進行開發與修正,盼能透過數位工具強化早療支持系統,讓偏鄉服務不中斷,也讓溝通變得更即時、更有人味!
📣【「數位支持,溝通無礙」子計畫一說明會】📣
想了解「AI 科技如何協助語言障礙者溝通」嗎?
我們將在 11 月與 12 月舉辦兩場說明會,介紹計畫的理念與研究方向,並邀請大家共同參與「數位支持與包容科技」的推動!
🗓 時間:
📍2025.11.06(四)
📍2025.12.04(四)
中午 12:10~13:00(可擇一場參加)
🏫 地點:
國立台北大學社科院 112 教室(三峽校區)
(新北市三峽區大學路 151 號)
💡 本說明會為「實體+線上」同步進行。
線上報名者報名成功後將收到會議連結;
實體場次限額 50 名,現場提供便當 🍱
🔗 報名連結:
👉 https://forms.gle/8NSkmWZeADnCRK3N6
📞 聯絡人:李新潔 助理
電話:(02)8674-1111 #68904
Email:aiitntpu@gmail.com
歡迎對 AI、語言溝通輔具或包容科技議題有興趣的同學與老師踴躍參加,一起推動「數位支持、溝通無礙」!💬✨
✨ 科技的力量,讓溝通不再有界線。
🧡 聲音」不只是語音,更是情感與連結的橋樑。
透過 AI 科技,我們讓語言障礙者能以全新的方式開口說話、被世界聽見。
每一個「聲音」都值得被聽見,讓每一份情感、每一句話,都能真實地被傳達。
從研究到設計,從使用者訪談到實際測試,
這段影片記錄了他們從無聲到發聲的歷程。
我們親眼見證科技如何讓「障礙」不再是「阻礙」。
「溝通」是每個人的權利,不應被聲音侷限,
讓「想說的話」被理解,「想表達的情感」被聽見。
也記錄下團隊一次次的嘗試與突破,背後不斷前行的心路歷程。
💬 科技不只是冰冷的程式,更是讓社會包容的力量。
📽️ 點擊影片,看見「數位支持、溝通無礙」計畫的研究成果與人文關懷。
邀請您一同關注這項計畫,一起為多元共融發聲。
youtube 連結:https://www.youtube.com/watch?v=Yv8xSGSsoDY&t=9s
🌟 好消息分享 🌟
【NVIDIA DGX 超級運算資源申請通過啦!】 🚀
我們的計畫團隊成功獲得 NVIDIA 合作支援,取得兩個 DGX nodes(16 H100) 的數量,申請12月的使用週期(一個月)。
註:每一塊 H100 大約100萬,所以本次我們申請相當於獲得大約 1,600 萬元 GPU 使用1個月。💪
感謝 NVIDIA 的協助與技術支援,也感謝團隊的努力與投入!
#AI #NVIDIA #DGX #H100 #Research #Innovation
📣【「數位支持,溝通無礙」子計畫一說明】
時間:2025/11/6(四)12:10~13:00
地點:臺北大學社科院 112教室 感謝今天熱情參與的每一位老師與同學!🌟
在這場說明會中,江振宇老師詳細介紹了 VoiceBank 的操作流程與實例,讓大家更清楚了解 AI 如何協助語言障礙者進行溝通,而林昭吟老師細心說明了知情同意書的內容與研究倫理重點,幫助參與者更安心地了解研究過程與權益。 這場交流不僅讓大家對「數位支持與包容科技」有了更深的認識,也吸引了許多同學與老師加入子計畫的行列,共同推動「溝通無礙」的願景。
📣還沒來得及參加的同學別擔心! 我們將於 12 月 4 日(四)中午 12:10~13:00 再舉辦一場說明會!!! 歡迎對 AI 語音科技、語言溝通輔具有興趣的同學與老師報名參加,一起了解如何用科技讓溝通更有溫度。💬✨
🔗12月4日說明會報名連結:https://forms.gle/8NSkmWZeADnCRK3N6
#數位支持溝通無礙 #AI語音科技 #臺北大學 #包容科技 #Aiitntpu
📣 【專業人員焦點團體座談會 ✨ 】
📅 日期:2025年11月17日(一)
📍 地點:新竹市東區竹蓮街6號一樓(新竹市輔具中心)
在會議中,主持人張玉山老師、林昭吟老師,以及江振宇老師的研究助理廖經凱同學,針對本計畫的背景、核心任務與系統功能,進行了清楚的說明。團隊首先介紹計畫的整體架構與推動理念,說明如何透過跨領域合作,結合 AI 與語音科技,協助語言障礙者突破溝通上的限制,讓科技真正成為支持使用者的助力。
接著,研究助理示範了錄音系統的實際操作流程,包括語句練習、音檔上傳與平台介面使用方式。也說明使用者只要有網路,即可隨時隨地完成錄音練習,提升科技輔具的便利性。
此外,團隊亦播放了使用者和計畫相關成果影片,讓與會者直接看見個人化語音模型的實際效果與應用情境。透過視覺化影片與現場示範,與會者得以更快速掌握計畫的核心目標、技術成果與未來的應用可能。整體而言,團隊期盼藉由科技輔助,讓語言障礙者在生活中能更自由、自信且平等地表達與交流,推動更包容、更友善的溝通環境。
---------------問題與討論------------
在本次焦點座談會的問題討論交流中,與會專家也提出多項深具價值的建議,為計畫未來的推動方向帶來更多可能性。
首先,專家提到,計畫未來可望透過更廣泛的跨領域合作,擴大其能見度與服務對象。建議可以與地方職業工會合作,藉由工會網絡,可讓更多第一線服務人員認識語言輔具與 AI 溝通工具的實務應用,並有效將研究成果導入多元產業與實際場域,讓更多需要支持的族群受益。
在子計畫二的語庫建置部分,專家也建議可參考「學習吧」平台的錄音課程,其內容貼近日常生活。若能取得授權收錄至語料庫,不僅能提供構音障礙者能練習生活化的語句,同時也能豐富語音資料的多樣性,使模型訓練更完整、辨識更準確。
座談中亦討論到軟體類輔具的借用制度。專家指出,現行身心障礙者可借用的輔具包含硬體與軟體,但不同單位的借用規範仍不相同。例如:教育局的輔具借用通常受限於借用地點與使用時段,多以學生為主,尤其是國小及國高中生,借用對象主要是在校學習,因此輔具多僅限於教育場域使用,不可帶回家。相較之下,輔具中心的借用規範較為寬廣,服務對象包含各年齡層的身心障礙者、長者及一般民眾,借用的輔具種類也更為多樣化,使用目的不限於學習及場地。專家建議,後續可進一步釐清相關規範,希望錄音輔具可以落地使用,讓構音障礙者在日常生活中隨時都能練習與使用。
最後,與會者期盼計畫未來能擴大與多元單位的合作,產出更具影響力的成果,能持續與不同領域的機構建立合作關係,例如教育、社福、醫療、產業公協會等,共同產出更多具有實質效益的內容,並形成可長期推廣的模式,提升計畫對身心障礙族群與輔具使用者的整體價值。
大家相信,透過持續推動與整合,期待未來本計畫能在科技輔具與語音輔助領域發揮更大的影響力,為身心障礙者與所有需要溝通支持的族群,打造更友善、溫暖且具包容性的生活環境。
#溝通無礙 #AI輔具 #語音輔具 #科技向善 #共融社會 #包容社會 #包容科技 #再聲計畫 #國科會 #臺北大學 #新竹市輔具資源中心 #焦點座談會 #專業人員
2025年12月1日接受屏東大學資訊學院歐院長的邀請,去分享我們計劃的成果,我以「A I於吶語症之語音辨識」為主題,說明我們計劃之成果及目前進行的狀態,同學對於這個主題覺得非常有趣,會後也提出很多相關的問題及未來的建議,讓我們計劃達到一定的宣傳效果。
📣 【「數位支持,溝通無礙」子計畫二說明會|萱藝新知關懷協會交流紀錄】
日期:2025/12/12(五)
時間:10:00 ~12:00
地點:萱藝新知關懷協會(桃園市八德區豐德路261巷11-1號)
這天張玉山老師、林昭吟老師及助理們前往萱藝新知關懷協會,向研究參與者說明「子計畫二」的研究內容,包含研究目的、流程說明,以及知情同意書的重點,確保每一位參與者都能清楚了解自身權益與研究參與方式。
接著也實際進行 ezTalk 平台的操作教學,透過一步步的示範與說明,讓參與者更熟悉平台的使用方式,期待未來能透過數位工具,帶來更即時且友善的溝通支持。
在會議結束後,非常感謝負責人謝小姐熱情地帶領我們參觀協會製作的手工藝品,現場充滿溫暖與用心,也讓我們看見協會媽媽與孩子們真誠又可愛的一面,留下深刻又感動的印象。
謝謝萱藝新知關懷協會的邀請與信任,讓我們有機會走進社區、貼近服務現場,也更加確信「數位支持」能成為陪伴與連結的重要力量。
再聲計畫——每個聲音,都值得被聽見
會議名稱:國科會「以包容為導向之科技計畫」114 年度成果發表會
日 期:2025 年 12 月 26 日(五)–12 月 27 日(六)
地 點:台南桂田酒店(台南市永康區永安一街 99 號)二館二樓杜拜國際宴會廳
---------------------------------------------
在這場成果發表會中,再聲計畫團隊迎來三年期計畫的最後一年,也共同見證了這段時間所累積的價值與意義,為一路走來的努力畫下重要而深刻的句點。
從最初的構想到實際落地,這三年來,我們不斷嘗試、修正與累積,只為讓科技真正成為支持溝通、促進理解、擴大包容的力量。這場成果發表不只是階段性的總結,更是一段共同努力歷程的回顧——每一次測試、每一場討論、每一個被傾聽的聲音,都是推動我們持續前行的重要養分。我們也更加確信,科技不只是工具,而是能真正陪伴人、支持溝通,並拉近彼此距離的力量。
誠摯感謝主辦單位「國科會人文處」,以及協辦單位國科會「以包容為導向之科技計畫」推動與協調計畫、「中央研究院社會學研究所」,提供這個珍貴的交流與成果展示平台,讓不同團隊的努力得以被看見、彼此交流與相互激盪。同時,也感謝與談人、現場參與者,以及各位長官所給予的寶貴回饋與建議,為我們帶來許多深具啟發的思考。
此外,也衷心感謝一路陪伴的合作夥伴、協力單位,以及所有支持再聲計畫的朋友們。因為有你們的信任與投入,讓這段旅程得以走得更深、更遠。
更要感謝每一位並肩作戰的計畫夥伴,因為你們一路相伴,這三年的歷程走得踏實,也走得值得。
三年期計畫雖已告一段落,但我們相信,讓「每個聲音,都值得被聽見」並不會就此停下,而是將持續在不同場域延伸、發酵,成為未來行動的重要起點。
#再聲計畫 #臺北大學團隊 #溝通輔具 #讓每個聲音都值得被聽見 #構音障礙 #漸凍人 #以包容為導向的科技計畫 #114年度成果發表會 #國科會人文處
Facebook:https://www.facebook.com/aiitntpu
Instagram:https://www.instagram.com/p/Ct_a1FEh2vZ/?
utm_source=ig_web_button_share_sheet&igshid=MzRlODBiNWFlZA==
Line:https://liff.line.me/1645278921-kWRPP32q/?accountId=055qxzht(Line ID:@055qxzht)
YouTube:https://www.youtube.com/channel/UCt34jrWdLNwX9gHV9L_5ofQ
本計畫的粉絲專頁,會不時更新相關資訊,請大家幫忙訂閱、追蹤、按讚、分享!謝謝大家~
facebook:
https://www.facebook.com/aiitntpu
YouTube:
https://www.youtube.com/channel/UCt34jrWdLNwX9gHV9L_5ofQ
Instagram:
Line:
https://liff.line.me/1645278921-kWRPP32q/?accountId=055qxzht