佐思汽研發布《2021年中國汽車多模態交互發展研究報告》,對主流汽車品牌互動方式進行了梳理總結。
目前在汽車人機互動方面,呈現兩大特點:
1、在互動方式上,除了觸控、按鍵、旋鈕等傳統互動外,語音、手機已成為汽車人機互動的必選項。除此之外,人臉、手勢、車燈也成為互動方式擴充套件的熱門選項,更有部分品牌開始嘗試眼部追蹤、聲紋、指紋等新型互動方式。
2、在品牌佈局上,合資品牌在互動方式上相對保守,除語音、手機互動外,新型互動方式搭載較少,但豪華品牌成為多模態互動先鋒。例如賓士在其最新一代MBUX系統上,配備了人臉、手勢、眼部、指紋多種新型互動。相比之下,自主頭部品牌在新型互動方式的應用上更為積極,如長安汽車的視線喚醒、長城汽車的聲紋識別等。
國內外主流汽車品牌部分人機互動方式如下:
來源:佐思汽研《2021年中國汽車多模態交互發展研究報告》
語音作為常規互動方式之一,功能正在不斷完善
語音互動在原有效能之外,連續對話、音區鎖定、音色切換、語音自定義等特性已成為主流品牌的下一發展方向。
1、連續對話、音區鎖定已有多個品牌搭載。
具備連續對話的語音互動系統能夠在一次喚醒後,一定時間內無需再進行喚醒,提高指令響應的連貫性;音區鎖定則可以定位語音指令的發出者,在執行“開窗”、“調節空調溫度”等指令時更加精準。搭載這兩項功能的品牌主要有吉利、長安、長城、奇瑞、上汽榮威、廣汽傳祺、小鵬、蔚來、理想等。
吉利星越L--銀河OS的“主駕極客模式”支援主駕24小時免喚醒,具備四音區鎖定
小鵬汽車--語音助手小P,具備全場景語音功能,支援30秒連續對話、雙音區鎖定
2、音色切換指語音系統除了預設語音聲音外,可提供其他聲音供使用者選擇,如明星、遊戲人物的聲音等。搭載品牌有吉利、長安、長城、比亞迪、榮威以及新勢力品牌蔚來、小鵬、理想等。如,上汽榮威RX5搭載的斑馬智行維納斯系統可提供親和女聲、知性女聲、磁性男聲、稚嫩童聲、熱情女聲五種音色供選擇。
吉利星越L--銀河OS支援至多10種音色切換
3、語音自定義包括語音音色自定義和語音功能自定義。
“語音音色自定義”指使用者上傳自己或家人的聲音後,系統將該聲音應用於語音響應、導航播報等場景。搭載品牌有吉利、長城、上汽榮威、廣汽傳祺以及R汽車等。
“語音功能自定義”指使用者可自定義語音指令及該指令對應的操作,可極大地提高語音系統的可玩性,滿足使用者的個性化需求。搭載的品牌有小鵬汽車。
吉利星越L--銀河OS 支援使用者定製個性語音,自定義的真人聲音可以全場景應用,包括導航、應答等。
小鵬汽車--小P私人定製,小鵬汽車的車主可透過手機APP自定義語音指令及對應的操作
手勢繼語音、人臉之後,成為第三種新型互動方式
手勢互動主要透過車內攝像頭來判斷手勢動作,並將資料傳遞給車載系統控制單元,由控制單元調出與識別出的手勢相對應的功能。相較於語音控制,手勢控制操作更加精準、快速,且更容易學習掌握。
搭載手勢互動的品牌有寶馬、賓士、長安、長城、上汽榮威、廣汽傳祺、嵐圖、R汽車、北汽極狐、小鵬。其中長城、小鵬支援車外手勢識別。
WEY摩卡--支援在車外透過手勢控制車輛點火、前進、後退、暫停、熄火。
長安福特EVOS--全新一代SYNC+2.0支援手勢控制靜音、音樂播放、介面分屏以及返回主介面等操作。
車燈互動上車賓士、高合、智己等品牌
車燈互動透過車燈閃爍動作、車燈投影、燈組顯示屏等方式向外界傳達資訊,車燈互動為駕駛員與車外交通參與者的互動提供了渠道,在自動駕駛落地之際,車燈互動使自動駕駛汽車能夠與周圍環境進行通訊。目前賓士、奧迪、大眾、長城、比亞迪、高合、智己、小鵬等品牌搭載了該互動方式。
賓士--投影大燈將警告標識、標記輔助等與駕駛輔助系統相關的資訊投射在前方道路上。
智己L7--投影大燈可投射車語、導航、警示等互動資訊,並且可結合高精地圖提供車道級的導航引導;燈組顯示屏可提供多種圖案樣式,展示座艙內使用者的狀態;互動尾燈支援顯示文字、表情,如感謝、行人提醒、充電狀態等資訊。
除了車燈燈組外,部分品牌嘗試在車身前後增加顯示屏來向行人傳遞資訊,如北汽、三星等。
北汽Lite 300--在車輛前後配有LED顯示屏,可顯示文字、表情、動畫以及充電資訊等內容
多模態融合是下一發展方向
單一模態下的互動,對互動體驗的提升有上限。未來在提高互動體驗上,多模態融合是明顯可行且高效的選擇。目前在研的品牌有賓士、寶馬、華為、長安等。
1、語音+視線
語音互動對包含“這個、那個”等模糊指代詞的識別能力幾乎為零,這種情況下若加入視線追蹤,由視線鎖定的方向,再透過語音發出指令,可極大提高指令的響應率。
賓士“MBUX Travel Knowledge”--駕駛員可透過視線鎖定一棟建築物,並說:“我想知道這棟樓的用途”,即可獲取相關資訊。該功能由Cerence Look提供技術支撐。
2、語音+唇動識別
在語音互動的過程中,對指令的準確獲取是最關鍵的一步,而座艙複雜的環境、噪音和密集的人員增加了語音識別難度,近年新增的音區鎖定在一定程度上緩解了該難題。但受限於語音單模技術瓶頸,採用單一語音技術的互動對體驗的提升有限。
與唇動識別融合下的語音互動將極大提高語音識別效能,不同語言下的唇部動作不同,在嘈雜的座艙環境下,即使系統接收到聲音很小,結合唇部動作也可以保障較高的語音識別率。
北汽極狐搭載的華為鴻蒙OS唇動識別(在研階段)
《2021年中國汽車多模態交互發展研究報告》目錄
本報告共110頁
01
多模態互動概述
1.1 多模態互動定義
1.2 車載場景下的多模態交互發展歷程
1.3 主流品牌互動方式應用現狀
1.4 觸控互動
1.5 語音互動
1.6 語音交互發展趨勢
1.7 人臉互動
1.8 手勢互動
1.9 車燈互動
1.10 生物體徵檢測
1.11 其他互動
1.12 發展趨勢
02
合資品牌多模態互動
2.1 寶馬
2.1.1 寶馬交互發展歷程
2.1.2 寶馬-iDrive7.0系統車型舉例
2.1.3 寶馬-iDrive8.0系統車型舉例
2.1.4 寶馬數字鑰匙
2.2 賓士
2.2.1 賓士交互發展歷程
2.2.2 賓士MY MBUX系統車型舉例
2.2.3 賓士EQS
2.2.4 MBUX Hyperscreen亮點
2.2.5 賓士Vision AVTR概念車互動亮點
2.3 奧迪
2.3.1 奧迪交互發展歷程
2.3.2 MMI系統車型舉例
2.4 大眾
2.4.1 大眾交互發展歷程
2.4.2 智慧車聯 4.0車型舉例
2.5 福特
2.5.1 福特交互發展歷程
2.5.2 SYNC +車型舉例
2.6 別克
2.6.1 別克交互發展歷程
2.6.2 eConnect 3.0車型舉例
2.7 豐田
2.7.1 豐田交互發展歷程
2.7.2 智行互聯絡統車型舉例
2.8 日產
2.8.1 日產交互發展歷程
2.8.2 Nissan Connect超智聯絡統車型舉例
2.9 本田
2.9.1 本田交互發展歷程
2.9.2 Honda CONNECT車型舉例
2.10 沃爾沃
2.10.1 沃爾沃交互發展歷程
2.10.2 新一代智慧車載互動系統車型舉例
03
自主品牌多模態互動
3.1 吉利
3.1.1 吉利交互發展歷程
3.1.2 銀河OS代表車型-星越L
3.1.3 吉利銀河OS互動亮點
3.1.4 GKUI 19代表車型-星越
3.1.5 吉利品牌其他互動方式
3.2 長安
3.2.1 長安交互發展歷程
3.2.2 IMS智慧互動系統代表車型
3.2.3 IMS智慧互動系統互動亮點
3.2.4 長安品牌其他互動方式
3.3 長城
3.3.1 長城交互發展歷程
3.3.2 Fun-Life2.0系統代表車型
3.3.3 長城品牌其他互動方式
3.4 比亞迪
3.4.1 比亞迪交互發展歷程
3.4.2 Dlink4.0系統代表車型
3.5 奇瑞
3.5.1 奇瑞交互發展歷程
3.5.2 雄獅智雲4.1系統代表車型
3.6 上汽
3.6.1 上汽交互發展歷程
3.6.2 斑馬智行4.0代表車型
3.7 廣汽
3.7.1 廣汽交互發展歷程
3.7.2 ADiGO4.0代表車型
3.8 嵐圖FREE互動亮點
3.9 智己L7互動亮點
3.10 R汽車互動亮點
3.11 北汽極狐
3.11.1 北汽極狐互動亮點
3.11.2 鴻蒙OS車機系統代表車型
04
新勢力品牌多模態互動
4.1 蔚來
4.1.1 蔚來交互發展歷程
4.1.2 蔚來 NIO OS系統:按鍵、旋鈕、觸控為主,語音、機器人為輔
4.1.3 蔚來ET7
4.1.4 蔚來智慧鑰匙互動方式
4.2 小鵬
4.2.1 小鵬汽車交互發展歷程
4.2.2 小鵬汽車Xmart OS互動亮點
4.2.3 小鵬汽車Xmart OS代表車型
4.2.4 小鵬汽車互動細節介紹
4.3 理想
4.3.1 理想汽車交互發展歷程
4.3.2 理想ONE互動亮點
4.3.3 理想品牌其他互動方式
4.4 威馬W6互動亮點
4.5 高合HiPhi X 互動亮點
4.6 哪吒U Pro互動亮點
更多佐思報告
佐思 2021年研究報告撰寫計劃
智慧網聯汽車產業鏈全景圖(2021年9月版)
主機廠自動駕駛 |
汽車視覺(上) |
高精度地圖 |
商用車自動駕駛 |
汽車視覺(下) |
高精度定位 |
低速自動駕駛 |
汽車模擬(上) |
OEM資訊保安 |
ADAS與自動駕駛Tier1 |
汽車模擬(下) |
汽車閘道器 |
汽車與域控制器 |
毫米波雷達 |
APA與AVP |
域控制器排名分析 |
車用鐳射雷達 |
駕駛員監測 |
鐳射和毫米波雷達排名 |
車用超聲波雷達 |
紅外夜視 |
E/E架構 |
Radar拆解 |
車載語音 |
汽車分時租賃 |
充電基礎設施 |
人機互動 |
共享出行及自動駕駛 |
汽車電機控制器 |
L4自動駕駛 |
EV熱管理系統 |
混合動力報告 |
L2自動駕駛 |
汽車功率電子 |
汽車PCB研究 |
燃料電池 |
無線通訊模組 |
汽車IGBT |
汽車作業系統 |
汽車5G |
汽車線束 |
線控底盤 |
合資品牌車聯網 |
V2X和車路協同 |
轉向系統 |
自主品牌車聯網 |
路側智慧感知 |
模組化報告 |
商用車車聯網 |
汽車智慧座艙 |
車載顯示 |
商用車ADAS |
座艙多屏與聯屏 |
智慧後視鏡 |
Tier1智慧座艙(上) |
智慧座艙設計 |
汽車照明 |
Tier1智慧座艙(下) |
座艙SOC |
汽車座椅 |
汽車數字鑰匙 |
TSP廠商及產品 |
HUD行業研究 |
汽車雲服務平臺 |
OTA研究 |
汽車MCU研究 |
AUTOSAR軟體 |
智慧停車研究 |
感測器晶片 |
軟體定義汽車 |
Waymo智慧網聯佈局 |
ADAS/AD主控晶片 |
T-Box市場研究 |
自動駕駛法規 |
ADAS資料年報 |
T-Box排名分析 |
智慧網聯和自動駕駛基地 |
汽車鎂合金壓鑄 |
乘用車攝像頭季報 |
智慧汽車個性化 |
飛行汽車 |
專用車自動駕駛 |
農機自動駕駛 |
礦山自動駕駛 |
港口自動駕駛 |
自動駕駛重卡 |
無人接駁車 |
汽車VCU研究 |
「佐思研究月報」
ADAS/智慧汽車月報 | 汽車座艙電子月報 | 汽車視覺和汽車雷達月報 | 電池、電機、電控月報 | 車載資訊系統月報 | 乘用車ACC資料月報 | 前視資料月報 | HUD月報 | AEB月報 | APA資料月報 | LKS資料月報 | 前雷達資料月報