徑衛視覺王波：基於人臉識別技術的駕駛行為分析解決方案 [一點資訊]

原標題:徑衛視覺王波：基於人臉識別技術的駕駛行為分析解決方案

融合人與路信息，藉助車聯網技術，做商用車的主動安全系統。

車雲按：2017年6月21日-22日，由中國安全產業協會、TIAA車載信息服務產業應用聯盟與車雲網共同主辦的2017年中國安全產業峰會暨首屆交通安全產業論壇在北京召開。本文是徑衛視覺科技總經理王波在大會上的主題演講，介紹了基於人臉識別技術的駕駛行為分析解決方案。

徑衛視覺科技總經理王波

各位朋友下午好，剛才Mobileye 蘇總給大家演示了一些ADAS的技術。Mobileye確實是整個行業的領導者，蘇總也解釋了他們單目視覺路線達到的技術水平。嚴格來說，我們是這個技術里走的另一條路，應該來說是雙目，但是我們的雙目和大家傳統說的雙目不一樣，是把另外一個攝像頭對準了人。

我今天分享的主題是基於人臉識別技術的駕駛行為分析。上午Dr Joseph Kanianthra談了很多美國駕駛員分心駕駛的研究，包括方方面面的數字的構成，他的演講提出了一些問題，我們其實是沿著這條路給大家提供了答案。

我先簡單介紹一下我們公司。公司項目起始於2010年，最早是因為家裡親戚疲勞駕駛事故的經歷，導致我們有這個念頭去做產品，一直到2013年左右，我們把第一代針對駕駛員分心的產品做好。

當時也很感謝美國高速公路委員會的一份研究報告，讓我們的產品又多了一條路徑。最早我們是完全關注駕駛員，美國的研究報告就指出對車道線的檢測，也就是ADAS這塊的應用。如果駕駛員開車的時候有蛇形跡象，或者無意識壓線，就表示他有疲勞情況出現。最後的報告結果是，對人的檢測和對路的檢測，都是非常有效解決疲勞駕駛的手段。所以那時我們就把對人和對路的融合，作為一個研究的重點方向，最後加上車聯網技術，形成了一整套系統。

行業背景就是解決適合中國現狀的安全管理，整個團隊都是汽車或者圖象視覺相關背景，有一部分來自於大數據挖掘的團隊，所以現在我們不是簡單的技術開發或者技術提供商，而是給大家提供了一套主動安全管理解決方案。

我們現在在國內兩客一危領域有超過300家的合作單位，除了用技術給大家解決安全管理的問題，同時在整個的系統裡面，融合了防禦性駕駛，這些安全管理要求比較高的，像中石化這樣的他們對車隊的安全駕駛的管理的一些理念，我們把他們的管理的訴求也同時融合到了產品的設計、報警邏輯當中。

這其實就是一份來自美國的數據，當中講到了94%的事故，可以歸結為人為因素，這也是Dr Joseph Kanianthra上午講的內容，國內的標準在這方面也能體現出來。在中國現有的國情，沒有真正能實現完全自主駕駛的過程中，人的因素是非常重的。美國每年造成的損失是每年死3、4萬人，損失兩千多億美金。

這是中國的數據，其實我們不用管它的細節，但是它最後表明的現象，也是大部分的交通事故都是和人的原因密切相關的。

這是我們的理念，我們通過這些年的應用，把整個交通事故分為四個階段，這是它的時間軸，第一個階段叫不良習慣的養成階段。所有的事故都不是突然發生，一定是有內在的原因。不良習慣的養成的階段是一個積年累月的過程，像司機在開車的時候玩手機，抽煙，亂變道、超速，這都是絕對危險的駕駛的行為。我們應該讓每個司機都有一個安全駕駛行為檔案，針對他的行為進行一些有效的培訓和教育，用防禦性駕駛技術提高他的安全意識和駕駛技巧，這是長期的過程。

第二個階段是事故發生前半小時。你會發現駕駛員的注意力有一個嚴重下降的過程，這個過程中他連續不斷地打哈欠，或者表情很獃滯，這一段時間表情沒有太多變化，或者開車時表現出有點蛇形、S形的走勢，這個時候就表明人的注意力嚴重下滑，這時其實是管理介入的最佳時間。如果我們通過車聯網技術直接干預到駕駛員駕駛，強制他休息，這個時候是有希望杜絕事故發生的。

再往後就是事故發生前5秒左右，今天上午周主任也講了2.5秒的關鍵時間，其實是一樣的。不良習慣的養成階段和事故發生前半小時都沒有得到有效的管理和干預，馬上就會演化成車道開偏或者就要發生碰撞。這其實是個結果，不是一個原因，原因是在前面兩個階段。

到了最後我們又要講到中國的情況了。你出了所有的事故，都需要一個責任認定和舉證的過程，不管是保險理賠還是公安舉證，都是有一些證據的。在中國這個市場我們做了這麼多年，我們發現錄象非常重要，一定要說明為什麼會出這個事故，這是我們對事故的跟蹤。

這個過程我們有兩套的硬體，一個是對駕駛員做監控分析，一個是對路面的前向安全。我們對駕駛員行為進行了一個綜合分析，包括身份的分析，解決了人與卡不相符的情況，貨運絕對不允許押運員來操作，他可以通過換卡做假，有了我們的技術就可以給企業降低很多的風險。所有的技術都是圖文並茂，我們會把司機的照片短視頻發到管理平台上，起到教育舉證的目的。

我們可以簡單看看人臉上的特徵點，你看到把他的眼睛、鼻子、嘴巴還有出現的一些朝向全部分析出來了，其實這裡面做得更多的是對他手部的動作，臉部的朝向，包括像他抽煙、打電話，這些行為也是在系統當中進行了一個綜合的分析。

對路面的這個，我們現在支持的車道線車輛的檢測，這兩個中間所有的報警信息是融合的過程。

這個講的是兩段價值百萬的視頻，這個請主辦方幫忙播放一下。

這是我們系統主動抓拍發到平台端的視頻，司機是拉著集裝箱的司機，他在車速70、80碼時候，拿著手機看電影，這種現象很多，糟糕的時候一天有一兩百次，因為開車的時候比較無聊，手機是脫離不了的。

看右邊視頻的情況是12點半發生的，其實在這之前司機已經連續不斷地打了很多次哈欠，然後真的睡著了。包括最近我們給幾個高端物流車輛測試，我們都抓出了疲勞駕駛，因為現在中國的司機工作的負荷非常重。這些情況如果導致了事故的發生，一定是非常重大的事故，第一是車速非常快，第二注意力完全不在路面上，或者他要睡著了，或者對車輛沒有任何控制和響應能力，這就是保險公司最頭疼的情況。

我們把整個的硬體加系統，主要是實現了三大異常管理。第一就是我們說的駕駛日常，在這個過程中駕駛的疲勞駕駛，開車的玩手機、打哈欠、抽煙、亂變道等等，這些都是事故隱患，我們根據它的事故的構成定點做了定向的功課，包括機械異常，從CAN裡面得到了信息。這裡面比較危險的是空檔滑行，在我們的商用車裡有很多有這樣的駕駛的習慣，這些是和業務相關的功能，不是核心的，只是系統順便給大家實現。

最後是整個系統的合成，硬體會把信息發到分散式的雲平台上面，包括大數據的分析，包括圖像視頻的存儲分類，每個用戶會有自己的帳號，可以看到他下面所有車的行為，包括像裡面會註冊登記，每一個司機都會有個行為檔案，為企業將來做司機培訓和KPI考核提供報表材料。

這是系統的具體功能，大家可以看到，其實我們整個的系統安全相關的報警將近20種，我們把每一個人的行為都進行了一些細分，這是對路的一些功能，也是ADAS的主流支持的一些功能。

這是我們的愛心系統，我們會把所有司機每一次行為都放到這個平台上面來，如果出現事故也是一個取證的過程，同時可生成所有的報表。我們知道中國現狀里，小車隊掛靠公司的特別多，上午講了5輛車以下的車隊佔90%以上，這些車隊其實沒有管理意識，也沒有管理的能力。但是他很關注安全，因為每一輛車上都背著貸款，出一次事故關係到企業的生存。

我們做什麼呢？我們就拋開平台做輕，主要包括司機的行為和報表，最後會到企業管理員的手機上。甚至我們向危險化學品行業學習，在做司機的管理培訓時，請司機的家人一起參加，讓他們看到拉危險品一旦出現事故會有什麼樣的危害，也會在司機家人允許的前提下，讓他們家人也看到司機開車的狀況，在嚴重的情況下有一個多方的聯動。

這是我們實際運用中的司機的行為，各種的違規，各種風險駕駛，還有壞習慣，包括像搶紅燈急剎車，這些都是我們實打實的案例。這個是和管理融合的效果，你需要有一些激勵的手段培訓司機，最後發現他的駕駛行為會有非常大的改善。所有對他的指正你必須有證據，你說他的駕駛習慣不好，必須拿出來圖片或者視頻，這樣他才會心服口服。

這是包括我們在危險品行業里的應用，但是徑衛最主要的是閉環，我們通過安全監控來實現主動預警，我們把他的行為結合企業的管理制度，比如說危險品抽煙，不管從管理部門還是企業都是嚴格禁止的、零容忍，一旦發現了對司機需要進行嚴格處理。還有一些行為是需要改善的，比如亂變道，這樣的行為屬於駕駛技術不足，需要進行一些改善。再往後是管理的細化，這個時候就要從企業的業務安排和調度的角度去做一些優化，這個閉環就可以保證事故數量會有一個大幅度的下降。

所以我們看什麼是主動安全預警。我們認為體現在三點，一個是預警的主動，就說我們通過這些圖像的分析的演算法，主動的發現他違規的行為，絕對不像三級的視頻一樣，大海撈針一樣，通過人工的遠程的調閱視頻，看有沒有違規。實時的提醒駕駛者並且上報平台。

還有干預的主動，在出事故的前半個小時，發現他是處於高危狀態下對它干預，通過語音的方式讓他停下休息。還有管理層的機制，對他進行一些獎勵和懲罰，用精確的數據分析，幫助駕駛員養成好的駕駛習慣。

這最適合中國目前商用車的營運環境，你完全不能指望只靠機器讓他實現突破性的改變。商用車領域需要運營，開車是他的工作，是工作就要有管理，所以在整個系統里一定是人防加機防，兩個結合起來，才能有一個安全的提升。

這是我們的一些優勢，第一是使用的時間比較長，各種工況，不同人種都有覆蓋。另外是監控的準確性，包括監控的類型也比較多。

我們在這個行業里一直非常聚焦商用車，尤其是兩客一危和公交市場，這是我們重點突破的。這是我們合作夥伴的照片，有典型的危險品運輸用戶，公交用戶，也有一些車廠，因為我們有的時候會自己做銷售運營，也有可能會和別人結合，以Tier2的角色供給車廠。這是我們的一些安裝實例，你會看到有重型車，有港口車輛，包括鐵路危險品，這些都是我們來安裝的場景。

我大概就講這麼多，謝謝大家。