本文選自《Smart Eye座艙監(jiān)測(cè)系統(tǒng)白皮書》，文末附下載方下一代前沿技術(shù)

改善道路駕駛安全和提升出行體驗(yàn)

1.不僅只關(guān)注駕駛員

多年來，汽車廠家采用各種各樣的傳感器來更好地探測(cè)道路狀況，早期傳感器可以幫助在碰撞危險(xiǎn)發(fā)生時(shí)車輛及時(shí)響應(yīng)，到如今具備半自動(dòng)駕駛能力的汽車可以實(shí)現(xiàn)自主泊車。但是絕大部分傳感器都是集中在車外世界的探測(cè)。

如果僅關(guān)注外部道路的話，這些傳感器就忽略了汽車環(huán)境的另一個(gè)重要組成部分：駕駛員、車艙和里面的乘客。只要汽車無法理解車內(nèi)人員的行為，其對(duì)駕駛行為的理解都是不完整的。只有借助于艙內(nèi)傳感器，我們才能完整的理解艙內(nèi)場(chǎng)景。

/ DMS駕駛員監(jiān)測(cè)系統(tǒng)如何定義了安全新標(biāo)準(zhǔn)

利用傳感器和AI軟件來實(shí)現(xiàn)座艙監(jiān)測(cè)不是一個(gè)新概念，最近幾年，DMS駕駛員監(jiān)控系統(tǒng)逐步變成了汽車行業(yè)的標(biāo)準(zhǔn)配置。受法規(guī)驅(qū)動(dòng)，偵測(cè)駕駛員狀態(tài)和適時(shí)干預(yù)的安全系統(tǒng)逐漸被各大汽車廠家所采用。除了法規(guī)之外，Euro NCAP的最新新車評(píng)價(jià)方案更是加速了DMS系統(tǒng)的普及。

結(jié)合傳感器如車內(nèi)攝像頭，再加上基于計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)的算法軟件，現(xiàn)今的駕駛員監(jiān)測(cè)系統(tǒng)能夠獲取駕駛員的狀態(tài)及行為。由于具備偵測(cè)駕駛員分心和疲勞的能力，DMS駕駛員監(jiān)測(cè)系統(tǒng)已經(jīng)成為避免事故和改善道路駕駛安全的一項(xiàng)關(guān)鍵技術(shù)。

/ 新一代汽車安全系統(tǒng)

早在上世紀(jì)90年代末期，Smart Eye已經(jīng)開始通過視線追蹤來偵測(cè)危險(xiǎn)駕駛行為的應(yīng)用。由于視線活動(dòng)是理解駕駛員狀態(tài)的一項(xiàng)關(guān)鍵指標(biāo)，最近十年該項(xiàng)技術(shù)快速發(fā)展，已經(jīng)不僅僅是對(duì)視線的分析，除了視線追蹤以外，新一代DMS駕駛員監(jiān)測(cè)系統(tǒng)基于一系列關(guān)鍵技術(shù)、如面部特征分析、頭部姿態(tài)追蹤、面部表情和情緒識(shí)別、身體姿勢(shì)追蹤和物體偵測(cè)等。

這些新技術(shù)能夠分辨各種類型的乘員、他們的行為和他們所使用的的物品。能夠賦能個(gè)性化的智能駕艙系統(tǒng)，從注冊(cè)用戶的座椅自動(dòng)調(diào)節(jié)到基于實(shí)時(shí)駕駛員情緒狀態(tài)的娛樂信息內(nèi)容的定制推薦。

基于這些新技術(shù)和算法的加持，汽車行業(yè)深刻意識(shí)到這項(xiàng)技術(shù)能夠延伸到駕駛員之外的群體。如果車內(nèi)傳感器能夠探測(cè)到整個(gè)座艙，我們可以獲取座艙狀態(tài)和車內(nèi)乘員狀態(tài)等有價(jià)值的信息，這也是我們所稱的座艙監(jiān)測(cè)，由于DMS系統(tǒng)的自身進(jìn)化，座艙監(jiān)測(cè)系統(tǒng)被認(rèn)為未來改善駕駛安全和提高出行體驗(yàn)的一項(xiàng)關(guān)鍵技術(shù)，能夠帶來全新的舒適性和娛樂性體驗(yàn)。

2.改善道路駕駛安全

為什么汽車需要了解車內(nèi)人員的狀態(tài)呢？

最重要的原因是探知車內(nèi)人員的行為和精神狀態(tài)可以挽救生命?；隈{駛員監(jiān)控功能，座艙監(jiān)測(cè)系統(tǒng)可以通過偵測(cè)危險(xiǎn)駕駛行為來預(yù)防事故，如分心、疲勞駕駛或駕駛員突發(fā)疾病。

通過將駕駛員監(jiān)控和座艙及乘員監(jiān)控結(jié)合起來，系統(tǒng)能夠深度獲取座艙狀態(tài)，如車內(nèi)其它乘員的行為，例如嬰兒哭泣或者后排乘客的爭(zhēng)吵，能夠成為駕駛員分心的重要起因。通過獲取影響駕駛員注意力的根本原因，座艙監(jiān)測(cè)系統(tǒng)能夠在第一時(shí)間獲取信息并且?guī)椭珊线m的干預(yù)指導(dǎo)，大大提升避免事故發(fā)生的能力。

甚至在事故發(fā)生后，座艙監(jiān)測(cè)系統(tǒng)還能夠?yàn)檐噧?nèi)乘員獲救提供幫助。

/ 針對(duì)各種場(chǎng)景的安全功能

乘員監(jiān)測(cè)功能，可以探測(cè)車內(nèi)有幾名乘客以及他們的實(shí)時(shí)位置，有助于調(diào)整傳統(tǒng)安全設(shè)施，如安全帶使用，防碰撞系統(tǒng)或者安全氣囊激活。如果一個(gè)乘客從他們座位上向前探出身體或者將他的腳放在儀表板上的話，對(duì)應(yīng)的安全氣囊發(fā)生工作時(shí)，造成的實(shí)際傷害將超過設(shè)計(jì)定義的保護(hù)。但是通過探測(cè)所有乘員的實(shí)時(shí)狀態(tài)，駕艙監(jiān)控系統(tǒng)就可以調(diào)節(jié)安全措施，將有價(jià)值的座艙數(shù)據(jù)實(shí)時(shí)傳輸給整車安全控制系統(tǒng)。

避免車內(nèi)乘客中暑

即使車輛處于停車狀態(tài)，座艙監(jiān)測(cè)系統(tǒng)同樣能夠挽救生命。在美國每年平均有38名兒童由于被遺留在車內(nèi)而遭受到致命的中暑，每年因?yàn)閷櫸锉贿z留在車內(nèi)而造成的慘劇預(yù)計(jì)也有數(shù)百起。

借助于座艙監(jiān)測(cè)系統(tǒng)，兒童或?qū)櫸锉贿z留在車內(nèi)會(huì)被第一時(shí)間發(fā)現(xiàn)，對(duì)應(yīng)的一系列安全措施會(huì)及時(shí)響應(yīng)。

首先車輛會(huì)自動(dòng)向已離開汽車的駕駛員發(fā)送報(bào)警信息，如果該報(bào)警沒有及時(shí)響應(yīng)，座艙系統(tǒng)會(huì)自動(dòng)啟動(dòng)車輛通風(fēng)或空調(diào)系統(tǒng)以降低車內(nèi)溫度，同時(shí)系統(tǒng)會(huì)繼續(xù)發(fā)送報(bào)警信息給車主，必要情況下將直接報(bào)警。

座艙監(jiān)測(cè)系統(tǒng)的最重要的影響就是提升了道路駕駛安全，同時(shí)能夠提升未來汽車的IQ和EQ特性，借助于傳感器及機(jī)器學(xué)習(xí)算法，一輛具備情感和智能屬性的車輛不僅能夠?qū)⑽覀儼踩厮偷侥康牡兀夷軌蚪o我們帶來更舒心和愉悅的行程體驗(yàn)。

3. 提升出行體驗(yàn)

如果車輛能夠理解駕駛員和乘客的情緒和認(rèn)知狀態(tài)，整個(gè)出行體驗(yàn)就可以實(shí)現(xiàn)定制，隨著對(duì)乘客理解的深入，系統(tǒng)能夠更好的根據(jù)乘客實(shí)時(shí)的需求進(jìn)行功能設(shè)定。

/ 車內(nèi)環(huán)境的定制

我們可以設(shè)想這樣一個(gè)畫面，一位乘客進(jìn)入車內(nèi)，車輛自動(dòng)識(shí)別乘客信息并將座椅自動(dòng)調(diào)節(jié)到乘客設(shè)定的最佳位置，車內(nèi)燈光和溫度也按照車外溫度和乘客生理和精神狀態(tài)自動(dòng)設(shè)定。同時(shí)系統(tǒng)能夠基于探測(cè)的乘員情緒結(jié)果來推薦不同的播放歌曲。

在旅途中系統(tǒng)還會(huì)實(shí)時(shí)提供優(yōu)化的提醒信息，這些提醒都是基于艙內(nèi)乘員的生理情緒等因素的實(shí)時(shí)變化而產(chǎn)生的。這樣車輛不僅僅是將乘客送到目的地，它還提供了適應(yīng)乘員狀態(tài)情緒和提升其舒適性的出行環(huán)境。

通過使用面部情緒識(shí)別技術(shù)，如Affectiva公司的情緒識(shí)別算法，你可以讓系統(tǒng)自動(dòng)保存旅程中的快樂瞬間，當(dāng)系統(tǒng)檢測(cè)到歡笑和愉悅的面部表情時(shí)，艙內(nèi)相機(jī)可以保存瞬間照片，讓乘客保留一個(gè)美好的回憶。

/ 以人為本的出行體驗(yàn)不僅局限于駕駛員和乘客

對(duì)座艙狀態(tài)的監(jiān)測(cè)能夠?qū)⒎秶由斓今{乘人員之外，例如座艙監(jiān)測(cè)對(duì)于運(yùn)行大型車隊(duì)的公司來說也是非常有意義的。

通過自動(dòng)分析艙內(nèi)狀態(tài)，系統(tǒng)可以判斷改車是否需要清潔或者其它形式的維護(hù)。如果你在出租車下車時(shí)遺落了手機(jī)或鑰匙，座艙監(jiān)測(cè)系統(tǒng)的物體檢測(cè)功能可以在瞬間發(fā)出提示，這些功能在未來的無人駕駛出租車或巴士上會(huì)變得非常實(shí)用，因?yàn)槲磥淼倪@些車輛都不會(huì)配置專門的駕駛員。

長(zhǎng)期以來，駕駛的主要目的就是將人們安全的送到目的地。不過隨著技術(shù)的發(fā)展，智能出行的內(nèi)涵也在擴(kuò)展，隨著車輛具備更多以人為本的功能，在安全抵達(dá)目的的前提下出行體驗(yàn)也越來越受到關(guān)注。

4.座艙監(jiān)測(cè)系統(tǒng)軟件背后的技術(shù)

和DMS駕駛員監(jiān)控系統(tǒng)一樣，座艙監(jiān)測(cè)系統(tǒng)同樣主要由傳感器和算法構(gòu)成。DMS駕駛員監(jiān)控系統(tǒng)重點(diǎn)關(guān)注于駕駛員，座艙監(jiān)測(cè)系統(tǒng)則獲取整個(gè)座艙的信息，通過采用不同的算法，系統(tǒng)分析場(chǎng)景下的不同對(duì)象以獲取整個(gè)艙內(nèi)環(huán)境及乘員的狀態(tài)信息。

視線和頭部追蹤算法
分析駕駛員和乘客的視線和頭部動(dòng)作姿態(tài)來判斷他們的精神狀態(tài)，以及他們和座艙的交互行為。來偵測(cè)潛在的疲勞、分心或醉駕跡象。

動(dòng)作識(shí)別算法
識(shí)別車內(nèi)乘員的行為，如飲食、吸煙、化妝或睡覺。

面部識(shí)別算法
識(shí)別車內(nèi)乘客，創(chuàng)建乘客輪廓信息，幫助系統(tǒng)理解乘員喜好。

手勢(shì)識(shí)別算法
識(shí)別分析有意識(shí)的手勢(shì)動(dòng)作（HMI交互手勢(shì)）和駕駛員及乘客的無意識(shí)的身體語言。

物體偵測(cè)算法
分辨識(shí)別不同類型的物體并且標(biāo)注其在車內(nèi)的具體位置。

情緒識(shí)別算法
通過分析面部情緒來偵測(cè)車內(nèi)乘員的細(xì)微情緒狀態(tài)。

人員姿態(tài)評(píng)估算法
實(shí)時(shí)分辨車內(nèi)乘員的姿態(tài)和位置。

座艙監(jiān)測(cè)系統(tǒng)相比較常規(guī)的DMS駕駛員監(jiān)控系統(tǒng)而言，集成了更多類型的算法，提供更廣的監(jiān)測(cè)范圍及功能。

乘員
車內(nèi)有多少位乘員？他們的位置在哪兒？他們都系好安全帶了嗎？安全氣囊是否處于合適的工況下？

面部識(shí)別
車內(nèi)的乘客是誰？他們有駕照嗎？

駕駛員狀態(tài)
駕駛員是否處于疲勞駕駛、分心或者表現(xiàn)出其它類型的危險(xiǎn)駕駛行為？他們是否處于可能影響安全駕駛的生病狀態(tài)？

行為偵測(cè)
車內(nèi)的乘員在做什么？他們?cè)谑褂檬謾C(jī)嗎？飲食？喝水或抽煙？乘員之間是否有交流？

兒童安全座椅和兒童遺留偵測(cè)
車內(nèi)是否有兒童？泊車以后是否有兒童被遺留在車內(nèi)？

寵物偵測(cè)
車內(nèi)是否有寵物？泊車以后是否有寵物被遺留在車內(nèi)？

面部情緒識(shí)別分析
車內(nèi)人員情緒如何？他們對(duì)車內(nèi)環(huán)境的反應(yīng)如何？對(duì)外界內(nèi)容的反應(yīng)如何？如音樂或視頻內(nèi)容。

物品分類和遺留物品偵測(cè)
車內(nèi)有哪些物品？是否有物品遺留在車內(nèi)（如手機(jī)、錢包）？是否有一些大件物品誤觸了安全帶報(bào)警。

/ 嚴(yán)肅對(duì)待開發(fā)和部署中的倫理隱私問題

當(dāng)我們展望未來的汽車，我們希望這些高度智能駕駛的車輛可以理解和預(yù)測(cè)車內(nèi)所有乘員的行為和需求，但是在將這遠(yuǎn)景變成現(xiàn)實(shí)的過程中，我們需要實(shí)現(xiàn)技術(shù)的開發(fā)和落地。

座艙監(jiān)測(cè)系統(tǒng)的核心是AI算法，機(jī)器學(xué)習(xí)為基礎(chǔ)的算法需要海量數(shù)據(jù)來訓(xùn)練和驗(yàn)證。座艙監(jiān)測(cè)系統(tǒng)需要偵測(cè)復(fù)雜的人員行為、動(dòng)作、情緒和狀態(tài)。需要不同人種在不同場(chǎng)景下的海量數(shù)據(jù)進(jìn)行訓(xùn)練。

一個(gè)重要的因素是保證不同人群數(shù)據(jù)的收集，不僅僅包括年齡、性別和膚色的差異，同時(shí)還要包括外觀特征的差異，如身材尺寸、發(fā)型、眼鏡和面罩等。座艙監(jiān)測(cè)系統(tǒng)需要對(duì)眾多變量因子識(shí)別并確保高度準(zhǔn)確性，盡量避免數(shù)據(jù)和算法之間的偏差。

數(shù)據(jù)收集費(fèi)時(shí)而且成本高昂。最近幾年虛擬數(shù)據(jù)成了一個(gè)游戲規(guī)則改變者。使用一張單一的資源圖像，虛擬合成工具可以快速和低成本的生成不同類型的海量圖像，如改變頭部姿態(tài)方向或光照。數(shù)據(jù)虛擬生成工具可以讓開發(fā)者快速生成訓(xùn)練用數(shù)據(jù)，加速算法開發(fā)進(jìn)程。

汽車業(yè)界需要嚴(yán)肅地對(duì)待技術(shù)的落地部署，特別系統(tǒng)中的攝像頭傳感器會(huì)采集人員數(shù)據(jù)。所有涉及到道德和隱私的問題必須認(rèn)真對(duì)待：哪些數(shù)據(jù)會(huì)被采集？是否保存？這些數(shù)據(jù)的用途是什么？誰能看到這些數(shù)據(jù)？這些數(shù)據(jù)怎么使用？現(xiàn)如今許多基于攝像頭傳感器的座艙監(jiān)測(cè)算法可以通過邊緣計(jì)算或者嵌入式系統(tǒng)實(shí)時(shí)運(yùn)行，采集的只是測(cè)量數(shù)值數(shù)據(jù)而不是個(gè)人識(shí)別信息，不需要將影像資料上傳到云端服務(wù)器。

未來的應(yīng)用場(chǎng)景不可避免的會(huì)持續(xù)增加，讀取乘員的個(gè)人信息能夠提供更好的出行體驗(yàn)。汽車廠家需要全面的評(píng)估用戶個(gè)人隱私保護(hù)以及贏得用戶的信任，需要對(duì)外界公開透明的說明系統(tǒng)是如何工作，以及系統(tǒng)對(duì)用戶會(huì)帶來哪些益處。

5.未來的座艙監(jiān)測(cè)系統(tǒng)

10年前DMS駕駛員監(jiān)控系統(tǒng)僅僅出現(xiàn)在少數(shù)汽車上，今天法規(guī)已經(jīng)要求即將上市的新車都要配置具備監(jiān)測(cè)駕駛員分心和疲勞駕駛的DMS系統(tǒng)。我們也可以想象未來座艙監(jiān)測(cè)系統(tǒng)的普及也是可以預(yù)計(jì)的。

/ 基于現(xiàn)有技術(shù)以及低成本部署

對(duì)于汽車廠家而言，部署座艙監(jiān)測(cè)系統(tǒng)的門檻比部署DMS駕駛員監(jiān)控系統(tǒng)要低很多?？梢栽诂F(xiàn)有DMS系統(tǒng)基礎(chǔ)上擴(kuò)展傳感器硬件和算法，周期和成本能夠得到有效的控制。

同時(shí)座艙監(jiān)測(cè)系統(tǒng)還允許汽車廠家進(jìn)行差異化定制功能的開發(fā)，當(dāng)今汽車行業(yè)競(jìng)爭(zhēng)激烈，功能的差異化也是汽車廠家關(guān)注的重點(diǎn)之一。在滿足法規(guī)評(píng)價(jià)要求的基礎(chǔ)上額外的特色功能有助于幫助企業(yè)在市場(chǎng)上贏得更多的用戶關(guān)注。

/ 未來的數(shù)據(jù)是多模態(tài)

人類行為是復(fù)雜具備多面屬性的，我們一般只能通過對(duì)象行為和生理狀態(tài)中的獨(dú)立參數(shù)去洞悉用戶狀態(tài)。座艙監(jiān)測(cè)系統(tǒng)需要基于多模態(tài)的方式進(jìn)行開發(fā)。

當(dāng)乘員之間互相交流時(shí)，我們?cè)诓煌愋偷亩嗄B(tài)數(shù)據(jù)之間建立聯(lián)系，如面部情緒、語調(diào)或身體姿勢(shì)，以判斷用戶的情緒和行為。同時(shí)未來基于多模態(tài)數(shù)據(jù)的座艙監(jiān)測(cè)系統(tǒng)還可以和車內(nèi)其它傳感器進(jìn)行交互，更好的理解車內(nèi)乘員的行為和需求。

/ 通過座艙監(jiān)測(cè)系統(tǒng)監(jiān)測(cè)酒駕

每年全球約130萬人死于交通事故

超過20%的悲劇都是和酒駕相關(guān)，自從汽車出現(xiàn)之日起，酒后駕駛就是嚴(yán)重的事故安全隱患。100多年來人們采用了多種手段來避免酒后駕駛的發(fā)生，但是每年還是有很多人由于酒后駕駛而失去生命。

酒駕檢測(cè)是汽車安全系統(tǒng)的一項(xiàng)重要而且緊迫的功能。當(dāng)下各國政府、汽車行業(yè)、科研院校和技術(shù)公司如Smart Eye都在尋找車內(nèi)偵測(cè)酒后駕駛的有效手段。

通過整合多傳感器采集的數(shù)據(jù)進(jìn)行數(shù)據(jù)融合，座艙監(jiān)測(cè)系統(tǒng)可以提供駕駛員是否適合駕駛的綜合評(píng)價(jià)。雖然酒駕檢測(cè)的技術(shù)還在開發(fā)中，但是基于車內(nèi)多傳感器數(shù)據(jù)及機(jī)器學(xué)習(xí)算法，座艙監(jiān)測(cè)系統(tǒng)的酒駕檢測(cè)功能終究會(huì)實(shí)現(xiàn)。

/ 突發(fā)疾病

未來基于多模態(tài)數(shù)據(jù)的座艙監(jiān)測(cè)系統(tǒng)不僅可以檢測(cè)酒后駕駛，還可以用于駕駛員突發(fā)疾病的檢測(cè)，雖然發(fā)生概率不如酒后駕駛，但是確實(shí)會(huì)出現(xiàn)在現(xiàn)實(shí)世界中。

實(shí)際上根據(jù)權(quán)威部門統(tǒng)計(jì)，在瑞典約10%的致命交通事故都和駕駛過程中駕駛員突發(fā)疾病相關(guān)。

通過技術(shù)手段在第一時(shí)間有效偵測(cè)駕駛員身體不適的跡象，車輛可以在事故發(fā)生之前及時(shí)進(jìn)行干預(yù)。例如今天的座艙監(jiān)測(cè)系統(tǒng)已經(jīng)可以監(jiān)測(cè)心率異常，車輛可以在其可能影響安全駕駛之前提前進(jìn)行有效干預(yù)。

隨著技術(shù)的發(fā)展和改進(jìn)，未來的座艙監(jiān)測(cè)系統(tǒng)可以有效預(yù)防突發(fā)疾病對(duì)安全駕駛潛在的風(fēng)險(xiǎn)。

/ 座艙監(jiān)控系統(tǒng)如何促進(jìn)自動(dòng)駕駛技術(shù)更安全

隨著自動(dòng)駕駛技術(shù)的發(fā)展，座艙監(jiān)控系統(tǒng)的重要性也愈發(fā)凸顯。當(dāng)自動(dòng)駕駛技術(shù)允許駕駛員雙手可以離開方向盤時(shí)，座艙監(jiān)控系統(tǒng)對(duì)于車輛來說就從一項(xiàng)重要配置變成必需配置了。

目前看來還需要很長(zhǎng)一段時(shí)間才能讓駕駛員的視線和注意力從前方道路中解放出來，只要汽車還歸于自動(dòng)駕駛輔助車輛，人類駕駛員仍然是駕駛安全的主要責(zé)任人。

對(duì)于自動(dòng)駕駛輔助車輛來說，存在人機(jī)共駕的場(chǎng)景，在某些場(chǎng)景下系統(tǒng)需要人類駕駛員接管車輛，這往往被稱為“Hand-off”挑戰(zhàn)，為了確保車輛控制權(quán)的順利轉(zhuǎn)換，車輛需要能夠有效的識(shí)別駕駛員狀態(tài)。

如果車輛偵測(cè)到駕駛員處于分心或者不適合駕駛，系統(tǒng)會(huì)判斷繼續(xù)由系統(tǒng)來控制車輛行駛。反之如果車輛偵測(cè)到駕駛員處于適合駕駛的狀態(tài)，系統(tǒng)則可以將控制權(quán)安全的轉(zhuǎn)移給人類駕駛員。即使在未來的汽車中，準(zhǔn)確識(shí)別駕駛員的行為和精神狀態(tài)對(duì)于行車安全來說也是非常重要的。

自動(dòng)駕駛能力的提高也為駕駛員提供了更多的自由度來參與到智能座艙娛樂活動(dòng)中。

隨著自動(dòng)駕駛技術(shù)的發(fā)展，座艙監(jiān)控系統(tǒng)的重要性也愈發(fā)凸顯。當(dāng)自動(dòng)駕駛技術(shù)允許駕駛員雙手可以離開方向盤時(shí)，座艙監(jiān)控系統(tǒng)對(duì)于車輛來說就從一項(xiàng)重要配置變成必需配置。

6.座艙監(jiān)測(cè)系統(tǒng)應(yīng)用場(chǎng)景

當(dāng)下已經(jīng)有一些汽車廠家在要求為他們的新車配置座艙監(jiān)測(cè)系統(tǒng)了，在今后幾年內(nèi)我們預(yù)計(jì)配置座艙監(jiān)測(cè)系統(tǒng)的新車將上市銷售。在提升駕駛安全性的同時(shí)還提供更舒適的出行體驗(yàn)，未來座艙監(jiān)測(cè)系統(tǒng)將成為我們汽車生活的一部分。

下面是幾個(gè)典型的應(yīng)用場(chǎng)景將受益于座艙監(jiān)測(cè)技術(shù)。

道路安全

駕駛疲勞

用戶結(jié)束了一天緊張的工作開車回家，在路途中他越來越疲勞，座艙監(jiān)測(cè)系統(tǒng)偵測(cè)到了他的疲勞狀態(tài)，立即根據(jù)疲勞指數(shù)采取了相應(yīng)的應(yīng)對(duì)策略。

• 語音溫馨提示駕駛員下一個(gè)出口/服務(wù)區(qū)休息一會(huì)。

• 觸發(fā)觸覺、聽覺和視覺警報(bào)

• 娛樂系統(tǒng)播放活潑歡快的音樂

• 調(diào)低艙內(nèi)溫度和氛圍燈調(diào)節(jié)

• 車輛自動(dòng)靠邊停車休息

駕駛分心

座艙監(jiān)測(cè)系統(tǒng)偵測(cè)到駕駛員手里拿著手機(jī)，同時(shí)通過計(jì)算其視線偏離前方道路的頻率和時(shí)長(zhǎng)來判斷分心指數(shù)。同時(shí)基于其面部表情和語音識(shí)別其精神狀態(tài)，系統(tǒng)經(jīng)過綜合判斷認(rèn)定駕駛員沒有對(duì)駕駛行為保持足夠的注意力，自動(dòng)觸發(fā)下述一項(xiàng)或多項(xiàng)安全措施：

• 語音提示駕駛員關(guān)注前方道路，不要繼續(xù)操作手機(jī)

• 觸發(fā)觸覺、聽覺和視覺警報(bào)

• 降低音樂音量

• 增加自適應(yīng)續(xù)航功能的警覺程度

• 切換到自動(dòng)駕駛模式

駕駛分心 – 乘客

父親正載著女兒去托兒所，交通很擁堵他上班預(yù)計(jì)將遲到，女兒也開始哭鬧，父親想辦法讓她平靜下來，他沒有完全集中注意力在前方道路上。座艙監(jiān)測(cè)系統(tǒng)首先識(shí)別到車內(nèi)有多名乘員，而且其中一位是兒童。根據(jù)兒童面部表情和語音可以判斷其在哭泣，同時(shí)識(shí)別到另一位成年人情緒比較焦慮，而且未集中注意力在前方道路上，系統(tǒng)立即采取以下措施：

• 娛樂信息同播放其喜歡的兒歌或者電視節(jié)目以舒緩兒童的情緒。

• 語音提示駕駛員靠邊停車或者建議變更行駛路線。

L3 Hand-off挑戰(zhàn)

駕駛員為了接一個(gè)工作電話，在行駛過程中激活了自動(dòng)駕駛功能，電話中駕駛員與對(duì)方發(fā)生了激烈的爭(zhēng)吵，情緒激動(dòng)。自動(dòng)駕駛邏輯根據(jù)前方路況判斷需要將車輛控制權(quán)轉(zhuǎn)移給駕駛員，但是座艙監(jiān)測(cè)系統(tǒng)通過面部情緒識(shí)別和語音分析出駕駛員的當(dāng)前狀態(tài)不適合駕駛，座艙監(jiān)測(cè)系統(tǒng)立即采取以下措施：

基于駕駛員的狀態(tài)級(jí)別，系統(tǒng)未將操縱權(quán)轉(zhuǎn)移給駕駛員，而是直接控制車輛靠邊停車。

路怒癥

擁堵的交通令駕駛員心煩氣躁，他不能準(zhǔn)時(shí)參加一個(gè)重要的會(huì)議，而且他不停的在看手機(jī)，側(cè)方一輛車還強(qiáng)行插隊(duì)，差點(diǎn)發(fā)生碰撞，這令駕駛員更加生氣。座艙監(jiān)測(cè)系統(tǒng)及時(shí)識(shí)別到駕駛員的情緒變化以及通過分析其視線在前方路面的時(shí)長(zhǎng)和頻率來判定其屬于分心狀態(tài)，系統(tǒng)判斷當(dāng)下為非安全駕駛條件，為了行車安全，系統(tǒng)及時(shí)采取措施進(jìn)行干預(yù)：

• ADAS自動(dòng)駕駛輔助系統(tǒng)降低車速，提高制動(dòng)敏感度。

• 系統(tǒng)提醒駕駛員在下一個(gè)服務(wù)器休息一下。

• 語音提示駕駛員嘗試深呼吸平復(fù)情緒。

• 播放用戶喜歡的舒緩音樂。

用戶出行體驗(yàn)

智能語音助手

駕駛員想通過語音助手設(shè)定一個(gè)導(dǎo)航目的地，嘗試多次語音助手仍不能準(zhǔn)確識(shí)別地址，駕駛員感到非常沮喪。通過面部情緒和語音識(shí)別，座艙檢測(cè)系統(tǒng)識(shí)別到了憤怒和激動(dòng)的情緒。為了緩解智能語音助手的錯(cuò)誤，系統(tǒng)進(jìn)行如下的操作：

• 嘗試調(diào)整智能語音助手的語調(diào)。

• 嘗試重啟智能語音助手以解決識(shí)別錯(cuò)誤。

內(nèi)容推薦

朋友一起駕車出行，娛樂系統(tǒng)成功識(shí)別了車內(nèi)乘員，包括他們的年齡區(qū)間、性別和情緒。基于上述信息，系統(tǒng)做出如下決策：

• 推薦適合個(gè)人畫像、喜好和情緒狀態(tài)的娛樂內(nèi)容。

• 創(chuàng)建推薦音樂播放列表。

• 行程中基于乘員面部情緒反饋持續(xù)改善優(yōu)化內(nèi)容推薦。

網(wǎng)約車用戶體驗(yàn)

網(wǎng)約車司機(jī)在整個(gè)行程中與乘客互動(dòng)良好，乘客對(duì)司機(jī)也非常滿意，全程遵守交通規(guī)則且駕駛平順。座艙監(jiān)測(cè)系統(tǒng)識(shí)別到了乘客和駕駛員的愉悅情緒和笑容。

• 數(shù)據(jù)被上傳到云端平臺(tái)，管理平臺(tái)分析司機(jī)行為和用戶體驗(yàn)。

• 每個(gè)季度管理平臺(tái)對(duì)司機(jī)進(jìn)行打分評(píng)比，獲得最高評(píng)分的司機(jī)將獲得獎(jiǎng)勵(lì)。

• 用戶的評(píng)價(jià)顯示在網(wǎng)約車出行APP用戶評(píng)價(jià)中。

緊張情緒識(shí)別

司機(jī)正駕駛一輛半自動(dòng)駕駛車輛，他看到前方信號(hào)燈即將變紅，他不相信自動(dòng)駕駛系統(tǒng)，正在焦慮要不要人工踩下剎車踏板。座艙監(jiān)測(cè)系統(tǒng)第一時(shí)間識(shí)別到司機(jī)的情緒變化，系統(tǒng)立即采取措施建立司機(jī)和車輛之間的信任。

• 車輛發(fā)出預(yù)警，前方信號(hào)燈即將變成紅色。

• 及時(shí)采取平穩(wěn)制動(dòng)措施。

暈車癥

乘客在自動(dòng)駕駛車輛上由于暈車逐漸感到不適和惡心，座艙監(jiān)測(cè)系統(tǒng)識(shí)別到了乘客的面部情緒、語音、眼瞼開合度和視線方判定乘客處于不適狀態(tài)，系統(tǒng)立刻采取如下措施：

• 駕駛風(fēng)格調(diào)整為平順

• 調(diào)節(jié)車內(nèi)空氣流通速度

• 系統(tǒng)選擇切換另一條更適合的路線

Smart Eye為用戶提供業(yè)界性能領(lǐng)先的視線追蹤系統(tǒng)，在復(fù)雜應(yīng)用場(chǎng)景下提供一流的性能表現(xiàn)。我們的方案在汽車、航天航空、殘疾人設(shè)施、廣告媒體、行為科學(xué)等眾多領(lǐng)域的人類行為和人機(jī)交互研究領(lǐng)域得到了廣泛的應(yīng)用。今天我們的客戶包括NASA、空客、波音、豐田汽車、戴姆勒、奧迪、通用汽車、哈佛大學(xué)等數(shù)百個(gè)研究機(jī)構(gòu)和高校。

我們的子公司Affectiva是業(yè)界領(lǐng)先的情緒識(shí)別AI算法供應(yīng)商，幫助企業(yè)更好的理解他們的用戶對(duì)其產(chǎn)品（內(nèi)容、產(chǎn)品和服務(wù)）的感受，客戶涵蓋汽車、媒體娛樂、市場(chǎng)研究等行業(yè)。28%的世界500強(qiáng)企業(yè)和70%的世界大型廣告公司都在使用Affectiva的解決方案。

我們的子公司iMotions提供業(yè)界領(lǐng)先的人因多模態(tài)分析軟件平臺(tái)，能夠?qū)崿F(xiàn)跨傳感器平臺(tái)的實(shí)時(shí)數(shù)據(jù)同步。

SmartEye的汽車行業(yè)量產(chǎn)解決方案目標(biāo)是賦能主流汽車OEM的下一代車型，提供更安全、更人性化的出行體驗(yàn)。

Smart Eye作為專業(yè)的人因分析AI技術(shù)供應(yīng)商，在復(fù)雜應(yīng)用場(chǎng)景下解析和預(yù)判對(duì)象行為，在人類和機(jī)器之間架設(shè)一個(gè)溝通的橋梁，努力創(chuàng)造更加安全和可持續(xù)的未來。Smart Eye成立于1999年，總部位于瑞典，在美國、英國、德國、丹麥、埃及、日本、新加坡和中國擁有分支機(jī)構(gòu)。

如果你希望了解更多或申請(qǐng)Smart Eye眼動(dòng)儀現(xiàn)場(chǎng)Demo演示，歡迎聯(lián)系我們。

東揚(yáng)精測(cè)系統(tǒng)（上海）有限公司（Smart Eye授權(quán)代理商）

汽車電子測(cè)量部

上海市靜安區(qū)梅園路228號(hào)企業(yè)廣場(chǎng)901室

021-6380 9633

car@toyochina.com.cn

smarteye.ai

識(shí)別二維碼或點(diǎn)擊閱讀原文下載：

《Smart Eye座艙監(jiān)測(cè)系統(tǒng)白皮書》