隨著車聯網的各個方面越來越多地進入我們日常生活的許多方面，用戶正在與汽車之間進行多模式互動。目前，在移動互聯網的背景下，利用物聯網與汽車智能化技術，多模式交互技術已經被識別和試驗來適應汽車環境。
現在，基于語音的交互與視覺、觸覺界面的交互較為引人注目，但它僅僅是我們在當今汽車中以多模式交互方式的一部分。事實上，汽車制造商正致力于研究多模式交互，從而滿足人們對于汽車安全和科技感的追求。
多模式交互概念
多模式交互是為用戶提供多種與系統交互的模式。多模式系統可以處理兩種或多種組合用戶輸入模式，如文字、語音、視覺、動作、環境、觸摸和多媒體系統輸出協調一致的學習。
通過多種方式進行人機交互，充分模擬人與人之間的交互方式。這一交互方式復合機器人類產品的形態特點和用戶期待，打破了傳統PC式的鍵盤輸入和智能手機的點觸式交互模式。多種模式旨在共同工作，使互動更多直觀和自然。
多模式交互分類
多模式交互大致可以分為3類。多模態輸入的融合使用一種模式的優勢來彌補其他設計時間和運行時間等缺點。
-
順序多模式：意味著用戶必須在交互模式之間切換，但不能一起使用模式。
-
同時多模式：允許用戶一次使用多種模式與系統進行交互。例如：在路徑查找器應用程序中，用戶可以使用觸摸在屏幕上的地圖上指示兩個位置，并說“顯示從這里到這里的最快路線”。
-
輸入/輸出模式：多模式交互圍繞具有某些模式，采用各種形式輸入（視覺、觸覺、語音），將它們無縫地組合在一起，處理并以一種或另一種輸出模式（文本、音頻、學習）給出反饋或輸出。
車載多模式交互的必要性
1. 減少駕駛員分心
分心駕駛是任何可能會將人的注意力從主要活動駕駛任務分離的行為。所有分心都會危及司機，乘客和旁觀者的安全。這些分心的類型包括：
-
使用手機或智能手機，發短信
-
調整車內設施，如車窗
-
吃喝
-
與乘客交談
-
梳理
-
閱讀，包括地圖
-
使用導航系統
-
觀看視頻
-
調整收音機，CD播放機或MP3播放器“
-
駕駛員疲勞駕駛
-
心情不佳，導致狀態不加，容易分心走神
2. 減少認知負荷
由于駕駛員對于很多功能理解欠缺。人的工作記憶的容量有限，一次只能存儲5-9條基本信息。所以，在使用過程中一次只能處理2-3條信息，從而減少了一次處理的信息數。因此，急需有多模式交互系統做相關提醒和建議。比如說ADAS系統的應用。
△ADAS系統
車載多模式交互的應用和研發
盡管近年來多模式交互系統取得了重大進展，但在復雜的多模式交互成為普遍現象之前，還有許多工作要做。目前，汽車行業主要是在語音交互、HUD、觸摸屏等方面的研究比較多。但是下一代人機交互（HCI）設計需要包含能力識別用戶，在很多情況下，人機交互將更加注重情感交流和未來科技的研發。
1. 在方向盤上結合語音和手勢
通過使用語音識別功能，我們利用汽車中物體的可見性（例如鏡像）以及簡單訪問等功能。使用手勢進行操作，我們提供簡單的控制，即時反饋并輕松撤消操作。
2. 多模式情感智能界面設計
基于深度神經網絡的機器人行為多模態綜合學習，在每次驅動之前，使用屏幕校準注視矢量必須根據每個駕駛員的身高和位置進行驗證。多模態情緒識別框架，結合了駕駛員的腦電波和眼球運動。開發智能車載系統，提供實時幫助或回顧性反饋以減輕基于駕駛員狀態/行為以及交通的分心。
3. 車載HUD原型手勢識別界面
汽車內的各種信息娛樂設備的通知能夠集中在一起，從而使駕駛員專注開車，而無需將注意力放在儀表盤和中控。移動通信和導航數據識別能夠更好的獲取道路交通情況。
5.全息技術的應用
全息技術在之前的文章里已經有所陳述，在這里就不一一介紹了。
6. 多主體多通道交互模型
在進行基于汽車的交互設計與用戶界面設計之前，有必要建立一個新的交互模型，即基于汽車的多主體多通道交互模型。
7. “Put That There”
put that there 是麻省理工學院建筑機器組實施的語音和手勢互動系統。它允許用戶在大型視頻顯示器上構建和修改圖形數據庫。這項研究的目標是與復雜的計算機交互的簡單對話界面。
8. 汽車安全注意事項
目前，電子安全是所有人關心的主要問題之一。黑客，反社會組織可能針對自動車輛和智能系統采取行動，從而導致交通問題和事故。因此，確保汽車收到的信息不侵犯個人隱私是首要責任。
車聯網的技術發展給我們的研究提供了跨學科、跨領域的新可能性，在以汽車為中心的移動信息平臺的框架下，多模式交互方式給今后的汽車設計又提出了新的挑戰。
參考： humancarinteraction：MULTIMODAL INTERACTION Richa Mittal：In-vehicle Multimodal Interactionan Approach to Mitigate Driver Distraction Wei-Long Zheng ：EmotionMeter: A Multimodal Framework for Recognizing Human Emotions KuniakiNoda：Multimodal integration learning of robot behavior using deep neural networks Vikicfp:MMAutomotive 2018 : Multimodal Interaction in Automotive Applications
本文來源：pursuerHMI設計
未來汽車內的每一個表面都可以是智能表面，包括門飾板、儀表板、方向盤、天窗模塊、照明系統等等，這些表面現已由裝飾作用向機電一體化用戶界面發展。現在智能表面技術正處于市場導入及成長階段，發展潛力巨大，如何把智能表面技術做到更好，需要主機廠、方案設計、零部件供應商、材料企業等的共同努力，現艾邦建有汽車智能表面微信群，長城、一汽、長安、綠馳、東風、大陸、敏實、科世達、庫爾茲、日寫、東麗等企業均已加入，歡迎產業鏈上下游的朋友入群探討，共謀進步。
推薦閱讀：
活動推薦：
汽車智能表面高峰論壇
Automotive Smart Surface Industry Forum
時間：2018 年7月12~13 日
地點：上海汽車城-昆山維景國際酒店
（花橋鎮花橋國際商務城兆豐路2號，步行5分鐘可達上海地鐵11號線安亭站）
論壇議題&嘉賓（擬邀請）：
|
序No. |
議題 Topics |
演講嘉賓Speakers |
|
1 |
汽車智能表面產業鏈分析Automobile Smart Surface Industry Chain Analysis |
艾邦高分子：江耀貴Aibang CEO |
|
2 |
平板顯示及在交通系統中的應用Flat panel display and its application in traffic system |
復旦大學：谷至華Fudan Professor & Ph.D. |
|
3 |
寶龍油墨的汽車智能表面解決方案Proell Ink Automotive Smart Surface Solution |
德國寶龍油墨：吳張永Proell Manager & Ph.D. |
|
4 |
汽車智能駕駛艙的發展趨勢Development Trend of Intelligent Car Cockpit |
吉利集團：劉景林Geely new business strategy Director |
|
5 |
汽車智能表面技術探索與案例分享Intelligent Surface Technology Exploration and real project Sharing |
長安汽車：秦宇志Changan Auto Development Director |
|
6 |
汽車觸控解決方案介紹Automotive Touch Solutions iinroduction |
賽普拉斯：宮江海Cypress Marketing manager |
|
7 |
智能表面3D圖案變形控制技術Smart Surface 3D Pattern Deformation Control Technology |
浙江工業大學：董星濤ZJUT Professor |
|
8 |
基于智能語音的多模態車載體驗新范式A New Paradigm of Multimodal Vehicle Experience based on Intelligent Voice |
阿里巴巴集團：王一行Alibaba group Senior UX designer |
|
9 |
碳納米棒在汽車智能表面的應用Application of Carbon Nanorods in Smart Car Surfaces |
CANATU：顏國義Canatu Greter China sales Director |
|
10 |
光學微納紋理在汽車CMF方面的新技術介紹Introduction of new technologies for optical micro-nano texture in automotive CMF |
蘇州印象鐳射科技有限公司：胡祖元GZ laser CEO |
|
11 |
KURZ汽車智能表面的實施案例KURZ car smart surface implementation case |
庫爾茲：Kenny LAMKURZ Markteting Director |
|
12 |
集成功能和裝飾的表面處理工藝技術Integrated functional and decorative surface treatment process technology |
上海科世達：范良照Kostal New process technology supervisor |
|
13 |
納米銀線在觸控柔性方面及汽車智能表面的應用Application of nanosilver wire in touch flexibility and automotive smart surface |
C3nano：陳曉峰C3Nano Director& Ph.D. |
|
14 |
光學貼合在汽車LCD以及智能表面的應用Optical bonding on Automotive LCD and Smart Surface Applications |
偉亞光電：劉年虎VIA sales Director |
|
15 |
AFHC技術在汽車內外飾的抗指紋抗劃傷應用 Application of AFHC Technology in Anti-fingerprint and Anti-scratch of Automobile |
智宇創鑫 熊何宇 市場總監Zhiyu Markteting Director |
|
16 |
薄膜技術在汽車智能表面的應用Application of Film Technology in Intelligent Car Surfaces |
Opening（IML/IMD、TOM supplier) |
|
17 |
FIM工藝在汽車智能表面的開發應用Development and Application of FIM Process in Intelligent Car Surface |
Opening (FIM or foil supplier) |
|
18 |
造車新勢力對汽車智能表面的理解和需求New car builders understand and demand smart car surfaces |
Opening (新造車勢力:NIO…) |
|
19 |
高壓成型機在汽車智能表面的應用Application of High Pressure Molding Machine in Smart Car Surface |
Opening(HPF供應商) |
報名聯系人：
方式1：在線報名
方式2：請加微信并發名片報名；
徐小姐：18617020032ab020@polytpe.com
江先生：18666186648 jyg@polytpe.com
仇小姐：15013545762 ab025@polytpe.com
閱讀原文，即可報名
始發于微信公眾號： 艾邦高分子