拿出手機(jī)買東西、交水電費(fèi)、定外賣……這些普通人看來(lái)隨手可得的日常對(duì)于視障人士來(lái)說(shuō)卻遙不可及。不過(guò)為了他們不掉隊(duì),技術(shù)人員也沒(méi)放棄努力。
最近阿里聯(lián)合清華大學(xué)—阿里巴巴自然交互體驗(yàn)聯(lián)合實(shí)驗(yàn)室公布了一項(xiàng)人機(jī)交互研究新成果:一枚AI盲鍵,首次打通了語(yǔ)音和觸感兩大感官系統(tǒng),為盲人朋友更好“玩手機(jī)”提供了一種新可能。
據(jù)阿里巴巴人機(jī)自然交互實(shí)驗(yàn)室研究員趙晨介紹,這種新的盲人觸感反饋技術(shù)叫Smart Touch。具體做法是給手機(jī)貼一個(gè)新的“屏幕保護(hù)膜”,上面有支持觸覺(jué)交互的“盲鍵”,通過(guò)低成本的屏幕盲鍵按鈕提供觸覺(jué)。更重要的是根據(jù)頁(yè)面的動(dòng)態(tài)變化,盲鍵對(duì)應(yīng)的功能也隨之改變,提升交互效率和用戶體驗(yàn)。
彌補(bǔ)語(yǔ)音交互的不足
目前,視障用戶通常使用讀屏軟件操作手機(jī),用手指觸摸屏幕后由讀屏軟件提供語(yǔ)音反饋。“但這樣的交互方式還存在很多問(wèn)題,比如缺少觸覺(jué)反饋,用戶經(jīng)常需要訪問(wèn)大量不需要的元素,容錯(cuò)率低、糾錯(cuò)成本高且頻繁,所以視障用戶使用起來(lái)的用戶體驗(yàn)并不是很好。”清華大學(xué)計(jì)算機(jī)系教授喻純表示。因此,他們希望增加聽(tīng)覺(jué)、觸覺(jué)等其它交互手段,以彌補(bǔ)單純語(yǔ)音交互的不足,從而增加視障用戶人機(jī)交互的便利。
Smart Touch之所以可以實(shí)現(xiàn)盲鍵功能在不同頁(yè)面的功能變化,離不開(kāi)自動(dòng)理解頁(yè)面信息的智能算法。“該算法首先提取界面的語(yǔ)義和主要功能,然后以符合視障用戶心理模型的方式映射到觸覺(jué)盲鍵按鈕上。因此,和現(xiàn)有的技術(shù)相比,Smart Touch不單提供語(yǔ)音交互,還提供基于界面內(nèi)容理解的觸覺(jué)盲鍵。”喻純說(shuō)。
對(duì)于界面的主要功能按鈕,視障用戶也不再需要通過(guò)遍歷的方式去使用,通過(guò)盲鍵可以層次化地訪問(wèn)界面元素,這大大改變了視障用戶現(xiàn)在使用手機(jī)的方式,從現(xiàn)在的語(yǔ)音交互拓展到語(yǔ)音加觸覺(jué)交互,為視障用戶提供更高效更方便的用戶體驗(yàn)。
讓智能交互代替明眼人講解
“我們技術(shù)的核心主要有兩部分:界面理解和界面交互。具體來(lái)說(shuō),界面理解指對(duì)界面語(yǔ)意的理解。”據(jù)喻純介紹,界面的內(nèi)容包括三層:第一層解決“未加標(biāo)簽”控件。目前手機(jī)界面上有很多不同的圖標(biāo),大多數(shù)圖標(biāo)是一張圖片加文字,目前的讀屏軟件讀出來(lái)的是“未加標(biāo)簽”,Smart Touch 通過(guò)算法自動(dòng)地將圖標(biāo)和文本進(jìn)行關(guān)聯(lián),為圖標(biāo)提供標(biāo)簽。第二層對(duì)手機(jī)界面的邏輯區(qū)塊做自動(dòng)識(shí)別,形成界面元素的層級(jí)組織。第三層則對(duì)界面的交互語(yǔ)義做理解,將界面依據(jù)視障用戶的心理模型讀出來(lái)。
“我們的研究發(fā)現(xiàn)視障用戶在使用手機(jī)的時(shí)候希望有個(gè)明眼人在旁邊,把界面上的內(nèi)容講解給他/她。Smart Touch算法的長(zhǎng)期目標(biāo)是希望可以達(dá)到像用戶旁邊的明眼人一樣轉(zhuǎn)達(dá)頁(yè)面內(nèi)容。”喻純說(shuō),“目前版本上不同界面的盲鍵是根據(jù)界面內(nèi)容按規(guī)則變化的,隨著我們算法的繼續(xù)改進(jìn),以后界面的交互盲鍵也會(huì)自動(dòng)生成,這樣可以支持更多的手機(jī)應(yīng)用。”
低成本惠及弱勢(shì)人群
“視障用戶去應(yīng)用商店下載運(yùn)行Smart Touch APP后,第一次需要先根據(jù)提示在手機(jī)界面相應(yīng)位置貼上‘盲鍵’按鈕,然后就可以使用Smart Touch 提供的功能了。”
落到實(shí)用性,趙晨表示盲鍵的成本非常低,“我們目前使用的是普通的硅膠膜,很便宜成本很低,這樣才可以使大多數(shù)視障用戶可以用得上用得起,更重要的創(chuàng)新是背后的AI算法。以后我們會(huì)對(duì)這個(gè)盲鍵進(jìn)行更多的觸感設(shè)計(jì),讓它有更清晰的觸覺(jué)反饋,滿足更多的應(yīng)用程序的需要。未來(lái)可以免費(fèi)發(fā)放給視障用戶使用”。
觸覺(jué)是人與環(huán)境、人與人交互的一個(gè)重要通道,也是視障用戶主要的信息通道,趙晨表示:“希望我們的技術(shù)創(chuàng)新不但服務(wù)于大眾用戶,也可以幫助像視障用戶這樣的弱勢(shì)或少數(shù)群體,讓他們的生活更愉快些。從另外一個(gè)角度,電話發(fā)明的初衷是為了幫助聾啞人,今天成為人人不可或缺的一個(gè)設(shè)備。從長(zhǎng)遠(yuǎn)看來(lái),我們希望為視障用戶提供的技術(shù)以后也能逐步惠及大眾。”(實(shí)習(xí)記者 崔 爽)
從近日召開(kāi)的湖北省市場(chǎng)監(jiān)管工作視頻會(huì)議上了解到,2021年,湖北市場(chǎng)秩序治理不斷深化,群眾幸福感、獲得感、安全感不斷提升。該省12315平更多
2022-01-19 14:47:51對(duì)外開(kāi)放是我國(guó)的一項(xiàng)基本國(guó)策,近年來(lái)我國(guó)深入推進(jìn)高水平對(duì)外開(kāi)放,不斷放寬外資準(zhǔn)入。1月18日,在國(guó)家發(fā)展改革委召開(kāi)的國(guó)家發(fā)展改革委1月更多
2022-01-19 14:23:25昨日,寧德時(shí)代全資子公司時(shí)代電服,推出換電服務(wù)品牌EVOGO及組合換電整體解決方案。未來(lái),EVOGO將選擇十個(gè)城市首批啟動(dòng)換電服務(wù),并發(fā)布更更多
2022-01-19 13:21:36近日,從廣西南寧市市場(chǎng)監(jiān)管局獲悉,《南寧橫州市茉莉花保護(hù)發(fā)展條例》(以下簡(jiǎn)稱《條例》)經(jīng)南寧市十四屆人大常委會(huì)第三十一次會(huì)議通過(guò),廣更多
2022-01-14 14:50:371月13日,山東省商務(wù)工作電視電話會(huì)議在濟(jì)南召開(kāi)。會(huì)議總結(jié)了2021年全省商務(wù)工作,分析了當(dāng)前商務(wù)發(fā)展形勢(shì),研究部署了2022年工作任務(wù)。山更多
2022-01-14 14:03:36離岸貿(mào)易是服務(wù)貿(mào)易的重要組成部分,是重要的外貿(mào)新業(yè)態(tài)之一。日前,商務(wù)部發(fā)布《十四五對(duì)外貿(mào)易高質(zhì)量發(fā)展規(guī)劃》,在加快發(fā)展貿(mào)易新業(yè)態(tài)方更多
2022-01-12 16:57:58為了支持中小企業(yè)發(fā)展,紓困助企,國(guó)家知識(shí)產(chǎn)權(quán)局會(huì)同相關(guān)部門出臺(tái)并推動(dòng)實(shí)施了一系列政策措施,在主體培育、金融賦能、轉(zhuǎn)化運(yùn)用、優(yōu)化服務(wù)等各方面為中小企業(yè)創(chuàng)新發(fā)展提供有力支持。更多
2022-01-12 16:12:572021年12月27日,由國(guó)家文物局、國(guó)家發(fā)展改革委、人力資源社會(huì)保障部、商務(wù)部、文化和旅游部、市場(chǎng)監(jiān)管總局六部門聯(lián)合出臺(tái)的《關(guān)于加強(qiáng)民間更多
2022-01-07 16:52:48教育部高校學(xué)生司司長(zhǎng)王輝日前在教育部舉行的新聞發(fā)布會(huì)上介紹,2022屆高校畢業(yè)生規(guī)模預(yù)計(jì)1076萬(wàn)人,同比增加167萬(wàn),規(guī)模和增量均創(chuàng)歷史新更多
2022-01-07 16:49:50一杯美式原價(jià)24元,減去商家對(duì)用戶的活動(dòng)補(bǔ)貼19 3元,平臺(tái)技術(shù)服務(wù)費(fèi)0 96元和履約服務(wù)費(fèi)3 6元,最終預(yù)計(jì)收進(jìn)(非利潤(rùn))0 14元2021年12月23日更多
2022-01-07 15:10:37