Microsoft 為 ALS 患者建立開源應用程式

自從幾年前在社交平台瘋傳的冰桶挑戰開始,更多人關心 ALS 患者的情況及 ALS 研究開發。Microsoft 也不例外。

最近 Mircosoft 宣佈為患有 ALS 疾病的患者研發了名為 GazeSpeak 的應用程式,幫助他們用眼神進行溝通。肌萎縮性側索硬化(ALS)是一種神經系統疾病,讓大腦和脊髓中神經細胞或者神經元受損。有時,眼睛成為他們唯一的溝通工具。

GazeSpeak 在聆聽著的設備上運行,通過攝像頭跟蹤患者的眼睛運動來預測該人想要說的話。它將字母劃分為四個框的網格,通過設備背面的貼紙可以讓 ALS 患者看到,並記錄與他們對應的查找。

在 Mircosoft 研究公司實習期間開發 GazeSpeak 的張曉義解釋說:「例如,Task (任務) 一詞,他們首先往下看去選擇包含’t’的組,然後向上選擇包含’a’的組,依此類推。GazeSpeak 然後使用 AI 預患者想要挑選的單詞,朗讀出最可能的一個詞。

微軟研究者 Meredith Morris 說:「我們使用電腦視覺來識別眼睛的手勢,AI 使用字詞預測,與通常用於與患有疾病的患者通信,在板上書寫字母以跟蹤人的眼睛運動的方法相比,GazeSpeak 識別速度提升 57%,一個人可以在 62 秒內得到預測的句子,而經常和患者相處的人士使用 GazeSpeak,識別速度還將進一步提升。」

Mircosoft 將在 5 月前推出 iOS 版本,並會將開放源代碼。

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *