基于眼電(EOG)的人機(jī)交互系統(tǒng)(HMI)的研發(fā)源于對(duì)非侵入式、高精度且持久可穿戴的醫(yī)療輔助設(shè)備的需求。傳統(tǒng)人機(jī)交互方式如觸摸屏、操縱桿或基于肌電(EMG)和腦電(EEG)的系統(tǒng)存在信號(hào)弱、易受干擾或使用不便等問(wèn)題,尤其不適合肢體活動(dòng)受限的用戶。眼電信號(hào)因其幅度大(0.05–3 mV)、易于檢測(cè)且能準(zhǔn)確反映眼動(dòng)方向,成為理想的HMI輸入信號(hào)。本研究提出了一種軟無(wú)線頭帶式生物電子系統(tǒng),集成了柔性電路和分形金電極,用于實(shí)時(shí)采集和處理EOG信號(hào),實(shí)現(xiàn)對(duì)眼動(dòng)的高精度分類與控制。如圖1A所示,受試者佩戴該頭帶設(shè)備,設(shè)備采用熱塑性聚氨酯(TPU)材料制成,具有良好的柔韌性和尺寸可調(diào)性,適應(yīng)不同頭圍用戶;圖1C展示了干電極與凝膠電極的EOG信號(hào)對(duì)比,干電極信噪比更高(22.1 ± 1.7 dB),信號(hào)質(zhì)量更優(yōu);圖1D進(jìn)一步顯示干電極在長(zhǎng)時(shí)間佩戴下無(wú)皮膚刺激,而凝膠電極易引起皮疹。該系統(tǒng)的優(yōu)勢(shì)在于其舒適性、高信號(hào)質(zhì)量、無(wú)線實(shí)時(shí)控制能力以及高達(dá)98.3%的眼動(dòng)分類精度,適用于輪椅控制、虛擬現(xiàn)實(shí)等多種醫(yī)療與交互場(chǎng)景。

圖1 系統(tǒng)概述與性能對(duì)比
圖1(A)頭帶設(shè)備佩戴實(shí)物圖;圖1(B)納米膜電極特寫(xiě)與皮膚貼合圖;圖1(C)干電極與凝膠電極EOG信號(hào)及SNR對(duì)比;圖1(D)凝膠電極引起皮疹與干電極無(wú)刺激對(duì)比;圖1(E)EOG信號(hào)處理至應(yīng)用的完整流程示意圖。
HUIYING
基于眼電的人機(jī)交互系統(tǒng)設(shè)計(jì)關(guān)鍵說(shuō)明
該系統(tǒng)的設(shè)計(jì)關(guān)鍵在于一體化柔性結(jié)構(gòu)、電極布局優(yōu)化與無(wú)線信號(hào)處理。頭帶平臺(tái)采用3D打印的TPU材料,具有彈性可調(diào)機(jī)制,如圖2B所示,通過(guò)張力帶確保電極與皮膚緊密貼合,適應(yīng)不同用戶頭部尺寸。電極布局經(jīng)過(guò)優(yōu)化:兩個(gè)電極位于雙眼上方1 cm,一個(gè)電極位于左眼下眼瞼1 cm處用于垂直眼動(dòng)檢測(cè),接地電極位于額頭中央,確保全方位捕捉眼動(dòng)信號(hào)。無(wú)線電路部分集成藍(lán)牙低功耗芯片、微處理器和可充電電池,如圖2C所示,實(shí)現(xiàn)信號(hào)的實(shí)時(shí)采集、濾波與傳輸。整個(gè)系統(tǒng)通過(guò)柔性薄膜電纜連接電極與電路,如圖2D所示,確保在動(dòng)態(tài)使用中不會(huì)斷裂或脫落。該系統(tǒng)設(shè)計(jì)緊湊(2 × 3 cm)、全無(wú)線,克服了傳統(tǒng)設(shè)備笨重、有線連接帶來(lái)的運(yùn)動(dòng)偽影問(wèn)題。

圖2 設(shè)備制造與集成設(shè)計(jì)
圖2(A)頭帶平臺(tái)與電極集成結(jié)構(gòu);圖2(B)尺寸可調(diào)頭帶示意圖;圖2(C)柔性無(wú)線電路布局;圖2(D)電極與電路連接方式;圖2(E)分形電極制造流程(襯底-金屬沉積-激光切割)。
HUIYING
基于眼電的人機(jī)交互系統(tǒng)電極設(shè)計(jì)說(shuō)明
電極設(shè)計(jì)是本系統(tǒng)的核心創(chuàng)新點(diǎn),采用分形金納米膜電極,通過(guò)薄膜沉積(Cr/Au)和飛秒激光微加工技術(shù)制成,如圖2E所示。該電極具有優(yōu)異的拉伸性(最高30%應(yīng)變)和彎曲性(180°彎曲角),其分形圖案設(shè)計(jì)(彎曲半徑0.39 mm,線寬0.16 mm)有效分散應(yīng)力,防止機(jī)械斷裂。圖3A的有限元分析顯示,電極在拉伸和彎曲狀態(tài)下最大主應(yīng)變小于1%,圖3B的顯微鏡圖像驗(yàn)證了電極在反復(fù)拉伸和彎曲后無(wú)損傷,圖3C的電阻測(cè)試進(jìn)一步表明其電性能穩(wěn)定。此外,電極的生物相容性顯著優(yōu)于傳統(tǒng)凝膠電極:圖3D的紅外熱成像顯示,干電極佩戴8小時(shí)后無(wú)皮膚溫度升高或刺激,而凝膠電極在4小時(shí)后即出現(xiàn)明顯皮疹和溫度上升。這種電極不僅可重復(fù)使用,還能在高動(dòng)態(tài)皮膚變形下保持高質(zhì)量信號(hào)采集。

圖3 電極機(jī)械與生物相容性測(cè)試
圖3(A)有限元分析顯示電極在拉伸/彎曲下的應(yīng)變分布;圖3(B)電極拉伸/彎曲前后顯微鏡圖像;圖3(C)電極在拉伸/彎曲過(guò)程中電阻變化曲線;圖3(D)凝膠電極與干電極佩戴后皮膚紅外熱成像對(duì)比。
HUIYING
臨床研究:方法與結(jié)果
研究方法:
受試者與設(shè)備設(shè)置:研究招募多名健康志愿者,遵循IRB批準(zhǔn)協(xié)議。受試者佩戴頭帶設(shè)備,電極位置:雙眼上方各一電極,左眼下眼瞼一電極,額頭中央接地。
信號(hào)采集與處理:EOG信號(hào)以250 Hz采樣率通過(guò)藍(lán)牙傳輸至Android平板。信號(hào)處理流程如圖4A所示,包括:帶通濾波(Butterworth FIR)、去除DC偏移、去趨勢(shì)處理,最終通過(guò)機(jī)器學(xué)習(xí)算法進(jìn)行分類。

圖4 信號(hào)處理流程與分類示例
圖4(A)信號(hào)處理步驟(濾波、去偏移、去趨勢(shì)、分類)及對(duì)應(yīng)信號(hào)圖;圖4(B)四種眼動(dòng)(左、右、上、下)的原始EOG信號(hào);圖4(C)處理后分類結(jié)果信號(hào)圖。
分類算法:使用三種方法進(jìn)行六類眼動(dòng)分類(上、下、左、右、眨眼、空值):傳統(tǒng)信號(hào)處理、k近鄰(kNN)和卷積神經(jīng)網(wǎng)絡(luò)(CNN)。數(shù)據(jù)分為75%訓(xùn)練集和25%測(cè)試集。
研究結(jié)果:
分類精度:CNN算法表現(xiàn)最佳,整體準(zhǔn)確率達(dá)98.3%,顯著高于kNN(96.9%)和信號(hào)處理方法(95.5%)。圖5C的混淆矩陣詳細(xì)展示了各算法的分類效果。

圖5 機(jī)器學(xué)習(xí)算法比較
圖5(A)kNN分類示意圖;圖5(B)CNN模型結(jié)構(gòu)流程圖;圖5(C)三種方法(信號(hào)處理、kNN、CNN)的混淆矩陣對(duì)比。
實(shí)時(shí)控制演示:系統(tǒng)成功用于控制兩輪RC汽車,如圖6A和圖6B所示。通過(guò)五種眼動(dòng)命令(上:前進(jìn),下:后退,眨眼:急停,左:逆時(shí)針轉(zhuǎn),右:順時(shí)針轉(zhuǎn)),汽車能按預(yù)定路徑行駛并避開(kāi)障礙物,如圖6D所示。視頻S2記錄了實(shí)時(shí)控制過(guò)程。

圖6 實(shí)時(shí)HMI演示:RC汽車控制
圖6(A)受試者佩戴設(shè)備與控制場(chǎng)景;圖6(B)控制賽道與Android應(yīng)用界面;圖6(C)五種眼動(dòng)控制指令示意圖;圖6(D)汽車行駛路徑與七步控制命令分解圖。
HUIYING
總結(jié)
本研究成功開(kāi)發(fā)了一種柔性、無(wú)線、頭帶式眼電人機(jī)交互系統(tǒng),集成了高分形金電極、柔性電路和深度學(xué)習(xí)算法,實(shí)現(xiàn)了高精度、實(shí)時(shí)的眼動(dòng)識(shí)別與控制。系統(tǒng)在機(jī)械可靠性、皮膚相容性和分類性能方面均優(yōu)于現(xiàn)有設(shè)備,尤其適用于醫(yī)療輔助和虛擬現(xiàn)實(shí)交互。未來(lái)研究方向包括解決多通道信號(hào)串?dāng)_問(wèn)題,并進(jìn)一步整合EEG/EMG等多模態(tài)生理信號(hào)。
-
人機(jī)交互
+關(guān)注
關(guān)注
12文章
1287瀏覽量
57916 -
醫(yī)療電子
+關(guān)注
關(guān)注
30文章
1438瀏覽量
92149 -
EOG
+關(guān)注
關(guān)注
0文章
3瀏覽量
1097
發(fā)布評(píng)論請(qǐng)先 登錄
河南移動(dòng)榮獲2025年度ICT優(yōu)秀案例人機(jī)交互卓越創(chuàng)新突破方案
中科創(chuàng)達(dá)旗下Rightware攜手高通發(fā)布智能汽車人機(jī)交互解決方案
CIE全國(guó)RISC-V創(chuàng)新應(yīng)用大賽 呼吸機(jī)人機(jī)交互系統(tǒng)
重構(gòu)未來(lái)自適應(yīng)人機(jī)交互的創(chuàng)新技術(shù)
大模型驅(qū)動(dòng)下的人機(jī)交互革命,“超擬真人互動(dòng)”?讓玩具讀懂你的情緒
邊聊安全 | 人機(jī)交互對(duì)功能安全的影響
串口屏:重塑人機(jī)交互的開(kāi)發(fā)革命
人機(jī)交互:連接人類與數(shù)字世界的橋梁
中山大學(xué):用于呼吸識(shí)別和非接觸式人機(jī)交互的均勻快速響應(yīng)濕度場(chǎng)傳感陣列的可擴(kuò)展制備
聲智科技全球首發(fā)新一代人機(jī)交互框架
聲學(xué)技術(shù)如何重構(gòu)人機(jī)交互生態(tài)
愛(ài)普生XV7021BB陀螺儀傳感器在人機(jī)交互中的應(yīng)用
?多模態(tài)交互技術(shù)解析
為什么開(kāi)關(guān)柜人機(jī)交互裝置集成一鍵順控,可以替代開(kāi)關(guān)柜操顯裝置
眼電EOG人機(jī)交互會(huì)是未來(lái)交互的一種主流嗎?
評(píng)論