欧美日韩亚州综合,国产一区二区三区影视,欧美三级三级三级爽爽爽,久久中文字幕av一区二区不卡

你的位置:首頁 > 傳感技術 > 正文

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

發布時間:2017-01-03 來源:張偉 責任編輯:wenwei

【導讀】目前,單目視覺ADAS技術相對成熟,同時成本也比較低,應用最為廣泛。那么,到底單目視覺ADAS背后有哪些技術原理(算法、硬件)?同時如何讓廣大用戶觸手可及?

一、ADAS的實現途徑

伴隨著這幾年自動駕駛概念的火熱,ADAS越來越受大家關注,輔助駕駛作為自動駕駛的早期階段,在整個流程里扮演著感和知的角色。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

第一步是通過各種傳感器來采集車身已經周邊環境信息,包括但不限于GPS、車身傳感器、攝像頭及雷達等。目前汽車智能都離不開這幾種傳感器的融合運用,為車輛來建立周邊的立體信息。

第二步則是根據采集到的信息來進行道路、車輛、行人和路標的識別。對各種工況下道路參與者的狀態提取,給決策者提供決策信息。如果決策者為駕駛員,那么是輔助信息;如果決策者為制動部件,那么就上升到AEB或者LC等Level 2以上的駕駛輔助階段。

各類傳感器的機制從底層邏輯來說是比較類似的,都是光學或者模擬信號的數字化,采用算法來還原傳感量的變化。而攝像頭技術是目前ADAS領域最快速發展的傳感器技術。

SA(Strategy analytics)分析指出:如果車輛前方只有一個傳感器,那么最大可能是攝像頭;如果車輛前方有多個攝像頭,那么確定的是會有一個攝像頭在其中。

二、視覺ADAS的基本原理

我們以目前基于攝像頭的單目視覺為例來說明其基本原理。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

整個流程包括樣本的采集及標記,同時對標記的樣本進行大范圍訓練來提取特征和模型,將模型作為實際圖像數據進行分類識別。

另外一個維度,我們需要保證圖像源的質量,通過寬動態、強光抑制、降噪等技術來保證輸入數據源的干凈,將真實環境清晰的數據進行邊緣化和紋理化送入分類器進行識別。

同時,在這個環節我們要非常注重模型數據和圖像源數據的一致性,即樣本標記的數據和實際圖像源要來自相同的鏡頭、圖像Sensor和相同的ISP技術,來保證訓練和實際的高匹配。

這部分是目前在實驗室做數據時很難實現的,很多可能采用的是公開的樣本庫來訓練,而公開樣本庫所采用的攝像頭、鏡頭角度等并不是我們實際中使用的。

三、視覺ADAS的難點

在產品開發中,難點在各個環節都有覆蓋。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

首先是算法本身的檢測率,這是需要不斷提升的環節。需要在魯棒性和敏感性之間作平衡,來保證產品的良好體驗。

同時從產品工程化的角度講,很多時候并不能用檢測率最高的算法,必須優化算法速度,因為我們沒法將一顆i7芯片或者服務器搬到汽車上去;其次是正負樣本的積累,考慮到源同步的問題,樣本積累必須來自實測,同時保證大量。

第三個方面,既然做的是產品,那么硬件處理器和攝像頭的選擇必須考慮性價比、可量產性等。

第四,安裝方面要盡可能的簡化用戶的安裝步驟,降低安裝難度,那么需要在算法設計的時候充分將內外參的兼容性考慮進去,并在不同車型的測試中驗證,這部分是采用技術提升體驗的關鍵。

最后是天氣適應性,每種傳感器都有自己的長處,但是也都有自身的短板,比如雷達對靜態物體、激光雷達對天氣,攝像頭也會受制于天氣和光照影響,在這些條件下,提升攝像頭前端技術變得尤為重要(Mobileye也不僅僅是一個算法公司)。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

當前階段在嵌入式端工作的算法,普遍基于機器學習,其優點是工程化、量產化更有可行性。

任何人工智能算法的落地都必須具備可工程化。一方面是視覺前端的提升帶來了運算量的降低;另一方面科研人員的探索可以給技術實現提供更豐富的組合可能。

同時摩爾定律的繼續深化帶來芯片可以實時的完成更多復雜的算法,特別是嵌入式芯片可以運行以前高配置電腦甚至服務器才能完成的功能。

當然硬幣的另一面,依然有需要用更好的方法來解決的地方,包括有遮擋的目標物、檢測率的繼續提升等等。這些都有待攝像頭前端技術的繼續提升和深度學習算法的嵌入式應用來解決。

四、視覺ADAS的功能

接下來我們通過兩個簡單的例子來介紹車輛識別、車道線識別、交通標志牌識別等功能。

對車輛識別和車道線識別只是前方碰撞預警和車道偏離預警的第一步,我們還需要綜合速度、車輛自身行駛區域、前方車輛狀態等信息來進行分析,參照ISO標準來進行報警信息的輸出。

1、車輛識別及跟蹤:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

2、車道線識別:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

3、交通標志識別:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

基于前面基本功能和背景的分析,我們從以下幾個方面來探討ADAS技術的深化之路,它需要的是面向AEB(自動制動)、LC(車道中心保持)等。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

五、視覺ADAS的硬件

視覺ADAS系統其實是一套嚴謹的光學系統或者相機。

但是它比普通相機運行的環境更加苛刻,包括振動、顛簸、高溫等因素,我們從每一個環節來保證這套系統的一致性和可靠性,特別是圖像源環節,比如說鏡頭標定、焦距控制、畸變系數的補償,這些都構成產品可量產性的重要因素。

視覺ADAS系統的內參可靠性同時要結合外部參數的差異性。比如說車輛在平路和坡道時的視覺和測距完全不一樣,我們通過對自身鏡頭的參數和外部目標的視角進行距離矯正,最終達到1個像素以內的誤差。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

精準的距離測試是前車碰撞預警乃至AEB的基礎。

目前,基于單目視覺的測距方法集中于兩類:

其一,就是通過光學幾何模型(即小孔成像模型)建立測試對象世界坐標與圖像像素坐標間的幾何關系,結合攝像頭內、外參的標定結果,便可以得到與前方車輛或障礙物間的距離;

其二,就是在通過采集的圖像樣本,直接回歸得到圖像像素坐標與車距間的函數關系,這種方法缺少必要的理論支撐,是純粹的數據擬合方法,因此受限于擬合參數的提取精度,魯棒性相對較差。

正因如此,我們采用了光學幾何模型進行車距的計算。前面已經說過了,我們采用了嚴格的攝像頭標定方法可以獲得精準的內參和外參。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?
從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

除此之外,影響測距精度的另一重要因素就是車輛邊緣檢測的精度。我們采用了精確的邊緣檢測和多幀綜合檢測的算法,可以在不同的光線環境下得到相對精準的用于車距檢測的車輛坐標信息。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

盡管如此,由于道路平面的多變特性,動態的距離測試必須考慮外參的動態改變量及圖像處理時的隨機誤差。圖像上幾個像素的跳變,就可能引起遠距離車距測量的較大誤差。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

因此,我們在誤差來源分析的基礎上,力圖通過誤差修正方法及算法優化方法,從多個層面降低測距誤差:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

道路環境的精準重構:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?
從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

同時可以保證我們對周邊其他參照系的精確重構。在這個模型圖像里,我可以看到對道路環境進行了位置重構,對車道線距離、車輛距離、車道線角度以及車高等信息完成了提取,特別是車道線的距離檢測可以達到厘米級的誤差。

六、視覺ADAS的算法

剛才講到的是前端攝像頭,接下來是算法端的核心。我們需要的是對樣本進行大量的訓練。我們在樣本的訓練方式上采用了一些創新,包括UGC(User Generated Content)、圖像源同步、自動提取和人工校驗相結合等。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

算法的載體是硬件,硬件的選擇需要從運算速度、功耗散熱和成本三個方面來平衡。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

攝像頭、算法及硬件最終需要通過安裝來保證設計者的意志得到體現,糟糕的安裝會導致前面的工作功虧一簣。在有安裝條件的情況下,我們通過專業安裝人員進行標定板的安裝;同時我們有大量的DIY用戶,那么便可以通過精簡的內外參和行駛數據總結來給用戶提供個性化的報警機制。

我們目前近千臺的激活用戶經過上百萬公里的行駛里程積累,產生了一些比較喜人的數據。

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

根據我們的駕駛行為評分系統,某個用戶在為我們貢獻了2950公里里程的實際數據的同時,他的駕駛得分得到了穩步的提高,充分體現了ADAS系統對用戶的駕駛規范性提升價值。

最后,針對視覺ADAS的發展趨勢,程建偉認為將包含以下方面:

從硬件到算法,單目視覺ADAS背后有哪些技術原理及難點?

(本文內容由武漢極目智能CEO程建偉分享,新智駕整理。)




推薦閱讀:


從儲能、阻抗兩種不同視角解析電容去耦原理
數字電路PCB設計中的EMC/EMI控制技術
熱電偶之基本原理及設計要點
較簡單二極管更靈敏的AM檢波器設計
細談去耦合對電磁兼容的影響




要采購傳感器么,點這里了解一下價格!
特別推薦
技術文章更多>>
技術白皮書下載更多>>
熱門搜索
?

關閉

?

關閉

欧美日韩亚州综合,国产一区二区三区影视,欧美三级三级三级爽爽爽,久久中文字幕av一区二区不卡
91国产丝袜在线播放| 日韩精品成人一区二区在线| 欧美丰满嫩嫩电影| 色综合久久天天| 91亚洲精华国产精华精华液| 成人免费视频一区| 成人av网址在线观看| 成人涩涩免费视频| eeuss鲁片一区二区三区 | 久久久综合精品| 精品国产乱码久久久久久影片| 日韩一区二区三区视频在线观看| 56国语精品自产拍在线观看| 国产女人18水真多18精品一级做| 国产亚洲va综合人人澡精品 | 国产91对白在线观看九色| 韩国av一区二区| 成人av手机在线观看| 日本精品免费观看高清观看| 欧美日韩免费视频| 日韩一区二区精品葵司在线| www日韩大片| 亚洲丝袜美腿综合| 亚洲国产日韩精品| 久久99精品国产91久久来源| 国产老女人精品毛片久久| 成人激情黄色小说| 欧美午夜精品久久久久久孕妇| 在线成人午夜影院| 久久精品亚洲精品国产欧美| 国产精品国产自产拍高清av王其| 亚洲欧美国产高清| 麻豆91免费看| 99久久久久久| 91精品国产一区二区| 欧美激情一区在线| 日韩在线观看一区二区| 高清不卡一区二区| 5858s免费视频成人| 国产精品免费观看视频| 日韩电影在线一区二区三区| 成人av电影在线网| 欧美成人综合网站| 亚洲一区精品在线| 大桥未久av一区二区三区中文| 中文字幕亚洲精品在线观看| 亚洲国产精品久久不卡毛片| 成人av午夜电影| 欧美videos大乳护士334| 一区二区三区四区激情 | av一区二区三区四区| 91精品久久久久久久99蜜桃| 中文字幕一区二区三区四区不卡| 久色婷婷小香蕉久久| 欧美日韩免费一区二区三区视频| 欧美精彩视频一区二区三区| 日韩中文字幕不卡| 欧美日韩一本到| 亚洲男人的天堂av| 成人av网站在线| 国产色综合一区| 国产盗摄一区二区| 久久一区二区三区国产精品| 免费一级片91| 欧美日本乱大交xxxxx| 亚洲尤物在线视频观看| 一本到不卡精品视频在线观看 | 国产91精品在线观看| 91精品午夜视频| 午夜视频在线观看一区二区 | 狠狠色综合日日| 欧美一区二区三区性视频| 亚洲成人黄色小说| 欧美一区二区三区喷汁尤物| 日韩专区中文字幕一区二区| 91麻豆精品国产91久久久久久 | 99久久久精品| 亚洲欧美激情一区二区| 一本色道久久综合亚洲91| 成人欧美一区二区三区黑人麻豆| 成人福利在线看| 一区二区三区精品视频| 在线观看日韩电影| 亚洲一区在线视频| 日韩一区二区三区在线观看| 热久久一区二区| 欧美tickling网站挠脚心| 国产一区二区三区国产| 国产日韩亚洲欧美综合| 99精品视频一区| 首页国产丝袜综合| 久久久一区二区三区| 国产91富婆露脸刺激对白| 亚洲男人天堂av网| 欧美日韩成人一区| 国产精品一区二区久激情瑜伽| 国产精品久久99| 欧美精品三级在线观看| 国产福利91精品一区二区三区| 国产精品午夜久久| 欧美区在线观看| 国产91清纯白嫩初高中在线观看| 亚洲免费在线看| 欧美精品一区二区三区蜜桃视频| 懂色av中文一区二区三区| 亚洲国产日韩av| 国产色一区二区| 在线亚洲高清视频| 国产乱人伦偷精品视频免下载| 亚洲欧美另类久久久精品| 日韩亚洲欧美高清| 99久久99久久综合| 激情丁香综合五月| 一区二区三国产精华液| 精品精品国产高清一毛片一天堂| 99久久国产综合精品麻豆| 蜜桃视频在线观看一区| 亚洲欧美一区二区视频| 日韩欧美国产一区在线观看| 91小视频在线观看| 国产精品综合在线视频| 日韩精品一二三| 国产精品二三区| 久久久久久久久久久久久久久99 | 国产**成人网毛片九色| 性久久久久久久| 国产麻豆成人精品| 天天色天天爱天天射综合| 国产精品欧美一区二区三区| 欧美一级日韩一级| 精品视频一区三区九区| 91天堂素人约啪| 成人av电影在线网| 国产精品99久久久久久久女警| 亚洲r级在线视频| 亚洲综合一区二区精品导航| 日本一区二区三区国色天香 | 色综合色狠狠天天综合色| 国产精品主播直播| 美女mm1313爽爽久久久蜜臀| 午夜成人在线视频| 亚洲国产日韩精品| 亚洲一区二区不卡免费| 伊人夜夜躁av伊人久久| 日韩一区在线免费观看| 国产精品国产三级国产三级人妇 | 亚洲蜜臀av乱码久久精品| 国产日韩欧美精品在线| 欧美mv日韩mv国产网站| 日韩欧美一级二级三级| 日韩你懂的在线观看| 26uuu亚洲| 国产欧美一区二区精品久导航 | 日韩综合一区二区| 日韩av中文在线观看| 日本不卡视频一二三区| 欧美aaaaa成人免费观看视频| 日韩中文字幕区一区有砖一区| 亚洲成人综合视频| 美女诱惑一区二区| 国产成人夜色高潮福利影视| 成人激情综合网站| 色哟哟一区二区| 欧美色网一区二区| 91精品麻豆日日躁夜夜躁| 精品精品国产高清a毛片牛牛| 久久嫩草精品久久久精品| 国产精品网站在线播放| 亚洲在线视频一区| 日韩精品亚洲一区| 国产精品一区二区在线观看网站| 成人听书哪个软件好| 91福利在线看| 欧美成va人片在线观看| 欧美激情在线一区二区| 亚洲国产婷婷综合在线精品| 毛片av一区二区| 99精品视频在线免费观看| 欧美精品一卡两卡| 国产三级三级三级精品8ⅰ区| 亚洲精品免费视频| 精品一区二区影视| 色哦色哦哦色天天综合| 精品三级在线观看| 亚洲黄色小视频| 免费高清不卡av| 91麻豆精品一区二区三区| 日韩欧美中文字幕一区| 久久精品国产**网站演员| 国产成人av电影在线播放| 在线91免费看| 最新成人av在线| 国产精品一区三区| 欧美日韩成人一区| 最新热久久免费视频| 韩国av一区二区| 欧美日韩国产综合久久| 中文字幕一区二区三中文字幕| 美女一区二区三区| 欧美日韩免费视频|