目錄
第1章緒論001
1.1引言001
1.2國(guó)內(nèi)外技術(shù)發(fā)展現(xiàn)狀005
1.2.1多模態(tài)交互理論與方法005
1.2.2人機(jī)智能協(xié)作關(guān)鍵技術(shù)008
上篇互補(bǔ)式人機(jī)智能交互技術(shù)
第2章基于本體的人機(jī)智能交互信息語(yǔ)義建模方法013
2.1引言013
2.2人機(jī)智能交互場(chǎng)景要素定義013
2.3飛行員認(rèn)知行為本體建模017
2.4系統(tǒng)功能行為本體建模021
2.5人機(jī)交互行為本體建模029
2.6人機(jī)交互情境本體建模036
第3章基于信息流的人機(jī)智能交互網(wǎng)絡(luò)建模方法041
3.1引言041
3.2加權(quán)社會(huì)網(wǎng)絡(luò)分析方法041
3.2.1加權(quán)社會(huì)網(wǎng)絡(luò)分析流程042
3.2.2節(jié)點(diǎn)關(guān)系復(fù)雜度計(jì)算方法043
3.2.3復(fù)合關(guān)聯(lián)矩陣構(gòu)造方法046
3.3多通道智能交互模式轉(zhuǎn)換規(guī)則049
3.4人機(jī)智能交互網(wǎng)絡(luò)建模案例050
3.4.1網(wǎng)絡(luò)數(shù)據(jù)采集與處理051
3.4.2網(wǎng)絡(luò)統(tǒng)計(jì)特性分析057
3.4.3網(wǎng)絡(luò)魯棒性評(píng)估061
第4章飛機(jī)駕駛艙觸控交互設(shè)計(jì)與評(píng)估方法065
4.1引言065
4.2觸控交互信息腦電誘發(fā)機(jī)制065
4.2.1觸控交互界面特征分析065
4.2.2腦電誘發(fā)機(jī)制實(shí)驗(yàn)分析067
4.3觸控交互信息認(rèn)知建模方法079
4.3.1觸控交互任務(wù)的信息感知策略分析081
4.3.2觸控交互任務(wù)的操作與認(rèn)知流程082
4.3.3觸控交互信息認(rèn)知模型083
4.4基于模型的觸控交互界面評(píng)價(jià)086
4.4.1實(shí)驗(yàn)與仿真的相關(guān)性分析086
4.4.2基于模型的交互績(jī)效預(yù)測(cè)088
第5章飛機(jī)駕駛艙語(yǔ)音交互設(shè)計(jì)與評(píng)估方法090
5.1引言090
5.2飛機(jī)駕駛艙語(yǔ)音增強(qiáng)方法090
5.2.1駕駛艙環(huán)境噪聲091
5.2.2無(wú)監(jiān)督語(yǔ)音增強(qiáng)算法092
5.2.3降噪前后對(duì)比093
5.3語(yǔ)音交互情感識(shí)別模型096
5.3.1語(yǔ)音情感特征096
5.3.2語(yǔ)音情感識(shí)別模型099
5.3.3駕駛艙語(yǔ)音情感數(shù)據(jù)庫(kù)103
5.4語(yǔ)音交互工作負(fù)荷評(píng)估方法104
5.4.1基于語(yǔ)音情感的工作負(fù)荷評(píng)估方法104
5.4.2語(yǔ)音交互輔助駕駛設(shè)計(jì)示例111
5.4.3語(yǔ)音交互工作負(fù)荷評(píng)估案例113
第6章飛機(jī)駕駛艙體感交互設(shè)計(jì)與評(píng)估方法117
6.1引言117
6.2行為識(shí)別圖像預(yù)處理方法117
6.2.1復(fù)雜光照環(huán)境圖像處理方法117
6.2.2圖像坐標(biāo)系投影映射機(jī)制122
6.3體感交互行為估計(jì)方法127
6.3.1飛行員肢體檢測(cè)關(guān)鍵點(diǎn)檢測(cè)數(shù)據(jù)集127
6.3.2飛行員肢體姿態(tài)估計(jì)方法130
6.3.3飛行員手部關(guān)鍵點(diǎn)檢測(cè)方法138
6.4體感交互動(dòng)作識(shí)別與驗(yàn)證方法141
6.4.1圖網(wǎng)絡(luò)結(jié)構(gòu)概述142
6.4.2圖時(shí)空網(wǎng)絡(luò)模型142
6.4.3模型驗(yàn)證146
第7章飛機(jī)駕駛艙眼動(dòng)交互設(shè)計(jì)與評(píng)估方法148
7.1引言148
7.2眼動(dòng)交互基本原理與機(jī)制148
7.3眼動(dòng)交互系統(tǒng)功能設(shè)計(jì)方法151
7.3.1眼動(dòng)交互系統(tǒng)框架151
7.3.2眼動(dòng)行為模型152
7.3.3眼動(dòng)交互算法152
7.4眼動(dòng)交互風(fēng)險(xiǎn)辨識(shí)與評(píng)估方法154
7.4.1眼動(dòng)交互風(fēng)險(xiǎn)識(shí)別方法154
7.4.2眼動(dòng)交互風(fēng)險(xiǎn)形成機(jī)理157
下篇混合式人機(jī)智能交互技術(shù)
第8章飛機(jī)駕駛艙人機(jī)交互異常行為監(jiān)測(cè)方法171
8.1引言171
8.2飛行員異常操縱行為分類(lèi)171
8.2.1改進(jìn)的HTAHET方法171
8.2.2基于HTAHET方法的操縱行為分類(lèi)172
8.2.3實(shí)例分析175
8.3人機(jī)交互行為實(shí)時(shí)監(jiān)控機(jī)制177
8.3.1基于模糊集和時(shí)間線(xiàn)的飛行階段識(shí)別方法177
8.3.2基于改進(jìn)專(zhuān)家系統(tǒng)的飛行操作預(yù)測(cè)和異常對(duì)象監(jiān)測(cè)方法178
8.4人機(jī)交互異常行為評(píng)估與驗(yàn)證187
8.4.1飛行階段識(shí)別驗(yàn)證188
8.4.2飛行操作預(yù)測(cè)驗(yàn)證189
8.4.3異常對(duì)象監(jiān)測(cè)驗(yàn)證191
第9章飛機(jī)駕駛艙人機(jī)交互意圖識(shí)別方法193
9.1引言193
9.2人機(jī)交互意圖表征方法193
9.3人機(jī)交互顯式意圖識(shí)別方法197
9.3.1基于動(dòng)作數(shù)據(jù)的顯式意圖識(shí)別方法197
9.3.2基于生理數(shù)據(jù)的顯式意圖識(shí)別方法207
9.4人機(jī)交互隱式意圖推理方法212
9.4.1顯式和隱式操控意圖關(guān)系212
9.4.2基于GASVM優(yōu)化的HMM模型214
第10章飛機(jī)駕駛艙人機(jī)界面重構(gòu)與負(fù)荷均衡方法224
10.1引言224
10.2基于視覺(jué)注意力的人機(jī)界面自適應(yīng)布局方法224
10.2.1視覺(jué)注意力自適應(yīng)分配模型224
10.2.2PFD界面自適應(yīng)布局案例分析228
10.3基于優(yōu)先級(jí)調(diào)度的人機(jī)界面智能重構(gòu)方法230
10.3.1基于PSA的界面智能重構(gòu)230
10.3.2人機(jī)界面智能重構(gòu)案例分析232
10.4基于模糊控制的工作負(fù)荷均衡方法239
10.4.1工作負(fù)荷均衡模型239
10.4.2交互方式協(xié)調(diào)方法241
第11章飛機(jī)駕駛艙人機(jī)演化博弈與智能協(xié)作機(jī)制246
11.1引言246
11.2人機(jī)系統(tǒng)演化博弈建模方法246
11.2.1博弈模型參數(shù)的定義247
11.2.2博弈模型動(dòng)力學(xué)演化機(jī)制249
11.2.3博弈模型穩(wěn)定性機(jī)制250
11.3人機(jī)博弈與智能協(xié)作系統(tǒng)動(dòng)力學(xué)模型252
11.3.1飛行員行為狀態(tài)模塊253
11.3.2人機(jī)系統(tǒng)決策性能模塊256
11.3.3人機(jī)演化博弈模塊259
11.4基于智能交互場(chǎng)景的實(shí)驗(yàn)驗(yàn)證261
11.4.1實(shí)驗(yàn)任務(wù)場(chǎng)景設(shè)計(jì)262
11.4.2人機(jī)博弈功能設(shè)計(jì)263
11.4.3實(shí)驗(yàn)樣本選擇268
11.4.4實(shí)驗(yàn)結(jié)果分析268
參考文獻(xiàn)277