UNT教授致力于改善無法說話和行動(dòng)不便的人的溝通

北德克薩斯大學(xué)的一位教授正在努力幫助那些無法說話和患有嚴(yán)重運(yùn)動(dòng)障礙的人，這些障礙會影響他們的手語或打字能力，從而更好地進(jìn)行交流。

該項(xiàng)目是在計(jì)算機(jī)科學(xué)與工程系助理教授馬克·阿爾伯特(Mark Albert)被一名使用輪椅且因腦癱而無法說話的前學(xué)生找到后開始的。她正在尋找一種更好的交流方式，他注意到在他們的談話中，她很難準(zhǔn)確地觸摸平板電腦上她想要的按鈕，即使在按鍵保護(hù)的幫助下以防止她的手指從屏幕上滑落。他將其描述為試圖在平板電腦上按下右側(cè)按鈕，一只手被綁在背后，有人不斷地?fù)u晃屏幕。

“最初啟發(fā)這一想法的女性通過平板電腦進(jìn)行交流，但它非常緩慢且耗時(shí)，”Albert 說。“她很難在談話中表達(dá)情感，因?yàn)樗诘皖^打字，這需要一些注意力。在社交環(huán)境中，長時(shí)間的延誤和視覺干擾是非常有限的。如果她可以簡單地簽署自定義動(dòng)作，然后自然地將它們結(jié)合在一起并在對話中使用它，那將改變游戲規(guī)則。”

阿爾伯特，連同他的博士學(xué)位。學(xué)生 Riyad Bin Rafiq 創(chuàng)建了一個(gè)名為 TalkMotion 的應(yīng)用程序原型。該應(yīng)用程序可與智能手表等可穿戴設(shè)備配合使用，對常用短語進(jìn)行預(yù)編程以匹配設(shè)備的動(dòng)作。然后，佩戴者可以在對話中使用該設(shè)備，而不必在平板電腦上敲出消息。目標(biāo)是最終允許用戶使用他們可以執(zhí)行的動(dòng)作來訓(xùn)練系統(tǒng)，或者根據(jù)他們喜歡的移動(dòng)方式對其進(jìn)行定制。

該應(yīng)用程序的原型可在 Google 商店中找到，但 Albert 和他的實(shí)驗(yàn)室正在努力完善和完善它。目前，該應(yīng)用程序具有預(yù)編程的手勢和常用短語，以及用于輸入自定義手勢和短語的選項(xiàng)。

“當(dāng)我與激發(fā)這一靈感的女人交談時(shí)，你可以看到她臉上的興奮，”阿爾伯特說。“我總是向她強(qiáng)調(diào)，這些事情需要時(shí)間，很長時(shí)間。但即使是最微小的可能性也是令人興奮的。”