AI轉寫眼鏡助聽障人士無礙溝通 工教院學生展示多項創新項目 | 聯合早報
zaobao
為幫助聽障人士更好地與人溝通,24名來自工藝教育中區學院的學生組隊開發一副利用人工智能進行語音轉寫的眼鏡,使用者只需背一個小腰包,戴上一副眼鏡,和別人對話的時候就可以看到“字幕”。
名為“AI Voice Vista”的眼鏡藉助生成式人工智能ChatGPT,把語音轉換成文字,並且顯示在具有擴增實境(AR)功能的眼鏡上,過程只需幾秒鐘,目前只支持英語。如果有很多人説話,則會分別標註出來。
隊員之一蔡枝恩(17歲)告訴記者,他們做了大量研究,也諮詢新加坡聾人協會,得到了一些啓發。隊員們在軟件、硬件等方面分工努力,用半年時間製成樣品,再邀請聾人協會的成員幫忙測試,提出改進意見。
蔡枝恩説:“我們第一次測試的時候,字太大,影響了視覺。所以我們把字調小,放在底部。對於使用者來説,效果就好像我們在看有字幕的電影一般。”
除了顯示面對面的人説話的內容之外,這一眼鏡還利用人工智能捕捉其他生活中的“提示音”,並給出字幕,例如:“鳥叫聲”“關門的聲音”“有人走近的腳步聲”等。
延伸閲讀
[新捷運AI虛擬好幫手 讓聽障者搭車無障礙
](https://www.bdggg.com/2024/zaobao/news_2024_06_01_685886)
[國大研發頭戴式AI儀器 助視障者辨識周圍物體
](https://www.bdggg.com/2024/zaobao/news_2024_02_06_662679)
使用者無須身在有網絡的環境,只需在腰部佩戴一個對應的設備。蔡枝恩提到設備很輕,不會影響活動。
她説:“我們計劃加入更多語言,還想引入翻譯的功能,甚至是翻譯手語。我們想在眼鏡上加一個攝像頭和音響,通過AI來識別攝像頭拍到的手語並且翻譯,再通過音響讓眼鏡可以‘説話’,達到雙方溝通的效果。”
蔡枝恩和隊員們在工藝教育局和香港職業訓練局聯合舉辦的國際學生研討會上,展示了這個創新項目。此研討會於6月26日至28日在香港舉行,約620名學生參與。他們來自新加坡工教院、香港職業訓練局和深圳職業技術大學。工教院的學生團隊所展出的項目共15個。
輪椅攝像車 助愛好攝影的體障者拍攝影片
另一展出的項目“輪椅攝像車”,由工藝教育東區學院的18名學生製作。
攝像車能幫助熱愛攝像的殘障人士捕捉不同角度的電影鏡頭,以講述他們的故事。項目設計類似在一個四輪板車上放置了座椅,可以前後左右以及弧線移動。座椅前方放置了可以調整角度的攝像機,使用者還可以設置其他設備來讓鏡頭更穩定。
目前學生們通過3D打印輔助,成功做出了一個迷你版的輪椅攝像車,使用者可以通過網頁、無線控制器或者內置操縱桿來控制小車進行拍攝。
隊長劉運恆(17歲)説:“我們最終的目的是做出一個真的可讓人坐上去的輪椅攝像車,方便那些行動不便的攝像愛好者。目前的迷你版也可以幫助很多人在一些特殊角度進行拍攝,我們也會進一步改進。”
談及參與項目的收穫,劉運恆説:“我們在調研和製作的過程中,學會了要換位思考,真正地站在那些殘障人士的角度,體會他們的需求並進行創新制作。我希望每個人的夢想都能獲得支持。”