隨著汽車智能化程度的提升，汽車的智能化功能、娛樂屬性等成為主機廠打造差異化的重點方向。車載攝像頭作為汽車的“眼睛”，是打造智能駕駛和智能座艙必備的視覺感知傳感器。
一、車載攝像頭的應用趨勢
從輔助駕駛到無人駕駛，車載攝像頭的應用需求從成像鏡頭向感知鏡頭轉變，使用場景由單一場景向多方位場景拓展，應用數量由單攝向多攝邁進。總之，未來車載攝像頭的使用數量會持續增長，攝像頭的分辨率越來越高。
1. 單車搭載攝像頭數量逐漸增加
在低速泊車應用上，從最早只有一個倒車后視攝像頭，后來發展到4~5個環視攝像頭；行車輔助應用上，從最開始1個前視單目攝像頭，發展到后來的前視三目、四目以及側視和后視共計7~8行車輔助攝像頭，甚至有些車內還配置有駕駛員監控攝像頭和乘客監控攝像頭等。
受功能需求和法規政策驅動，以及攝像頭硬件成本的降低的影響，一個L2+級別的智能化汽車配備11個以上的攝像頭將會是很普遍的現象。
汽車智能化對車輛自身安全、行人安全以及駕駛員監控等主動安全提出了更高的要求；攝像頭作為最為最重要的車載傳感器，可以發揮如下作用：
車外環境監控：a. 輔助或代替駕駛員感知外部環境，比如車道偏離預警、交通標志識別、行人/騎自行車人-AEB等。b. 代替內/外后視鏡提供圖像給駕駛員，隨著法規的推進，攝像頭將會取代傳統的內/外后視鏡去“監控”后方和側后方的環境狀況。
車內環境監控：駕駛員監控系統DMS延伸到乘員監控系統OMS，其監測范圍從駕駛員擴大到整個座艙內的物體檢測，比如車內兒童遺忘監測、座艙異常情況監測等。
2）法規政策驅動
汽車智能化的升級推動汽車安全技術標準也相應地提升，歐盟的E-NCAP、美國的IIHS以及中國的C-NCAP評價測試中不斷擴充主動安全技術的性能測試，包括以前視攝像頭為主傳感器所實現的AEB、FCW和LDW等駕駛輔助功能和基于艙內攝像頭實現的駕駛員監測和乘員監測等功能。
主要國家和地區政府已經擬定時間表全面標配AEB，并且政策的覆蓋范圍從商用車領域逐步擴展到乘用車領域。
歐盟和日本先后于2016、2017年放開對電子外后視鏡的法規限制，汽車電子外后視鏡率先在這兩個地區獲得發展。
我國尚不允許電子外后視鏡代替傳統后視鏡，但2020年6月，工信部發布《機動車輛間接視野裝置性能和安裝要求》征詢意見搞，為國內電子外后視鏡市場的應用吃下了一顆“定心丸”。
歐盟E-NCAP發布的最新2025路線圖，要求從2022年7月開始，所有新車都必須配備DMS。在中國，全國性的商用車DMS系統強制安裝法規已經在調研立項之中，最快有望在今年底出臺。
系統控制集中化架構驅動硬件簡化，攝像頭也逐漸被重新定義為“只采集、不計算”的輕量化傳感器設備。傳統攝像頭方案需實現圖像采集&視覺處理兩大功能，但在整車E/E 架構進化趨勢下，ECU 由分布式演變為集中式，算力向中央集中的同時，包括攝像頭在內的傳感器硬件得以簡化，視覺計算處理模塊也會向“中央大腦”轉移，攝像頭將只用于“圖像采集”。
攝像頭的硬件構成變得更加簡單，CIS、鏡頭成為最核心部件，攝像頭的硬件成本大幅降低。有業內人士提出：“120萬像素的攝像頭平均在150元，500萬像素攝像頭價格大概在300元左右，800萬像素攝像頭價格大概在500元左右?！?/span>
隨著自動駕駛級別的提升，對攝像頭的要求也越來越高；車載攝像頭最開始的應用是倒車輔助和行車記錄，主要是把攝像頭拍攝的圖像和視頻供人察看，幾十萬像素的分辨率也基本可以滿足要求。隨著功能和應用場景的擴展，攝像頭應用重點轉移到了在駕駛過程中輔助系統進行周圍環境感知。
系統對攝像頭的分辨率要求越來越高，從最開始30萬像素升級到100多萬像素，又發展到現在的200萬像素，并且隨著技術的進一步提升以及市場需求的推動，未來的高級別自動駕駛車輛中都在規劃應用800萬級別的高清像素攝像頭，用于對更遠距離的目標進行識別和監測。
車企是否應用800萬像素攝像頭，成本肯定是一方面，另一方面還要看車企是否具備相配套的技術能力。某車企自動駕駛負責人曾說過：“堆砌硬件會給人一種錯誤的認知，認為傳感器越多自動駕駛的能力就越高，但如果測試和算法跟不上，硬件堆砌再多也沒用?！?/span>
如果每個攝像頭都達到800萬像素，計算平臺處理數據的難度也在增大，整體系統成本必然也會增加。因此不能單看攝像頭的成本，還需要從整個系統的角度去看。同時，車載攝像頭并不是像手機那樣拼像素的能力，還需具備與高分辨率攝像頭配套的算法能力。
如果沒有與高分辨率攝像頭的相匹配的算法和測試能力，那無疑于“小馬拉大車”。雖然采用了一個較高的配置，但是性能提升卻有限。這種情況下，高分辨率攝像頭的性能依然是無法充分發揮出來的。那樣的話，800萬像素攝像頭便成了一個“花瓶”，只是吸引用戶的噱頭而已。
雖然整體上來講，算法和測試能力也許還未能跟得上攝像頭技術發展的步伐。但是高分辨率攝像頭這個未來的應用趨勢是毋庸置疑的，它是技術和市場“雙輪驅動”的必然結果。
在今年的上海車展上一些OEM宣布了800萬像素攝像頭的搭載計劃，同時一些供應商也在其自動駕駛感知解決方案中采用了800萬像素攝像頭作為前視應用場景中的主要傳感器。
8MP攝像頭車企應用匯總
全球首個量產應用800萬像素攝像頭的車型，前置攝像頭由原來的單目130萬像素升級到800萬像素，水平視場角由原來的52°擴展到120°，對車輛和行人的最遠有效探測距離由150m左右提升到200m以上。
在控制決策芯片上，2021 款理想ONE輔助駕駛芯片已經從EyeQ4換成了地平線征程3，算力由原來的2.5TOPS提升至10TOPS。
2）蔚來ET7
蔚來ET7計劃于2022年第1季度上市，該車搭載了11個8MP攝像頭，其中包括7個行車輔助攝像頭（4個前向 + 3個后向）和4個環視攝像頭。其中行車輔助攝像頭的供應商為聯創電子，環視攝像的供應商為德賽西威。
在控制芯片上，蔚來ET7采用自研的超算平臺-NIO Adam，它包括2顆主控芯片、1顆冗余備份芯片、1顆群體智能與個性訓練專用芯片共計4顆英偉達Orin芯片構成，算力共計1016TOPS。
3）極氪001
極氪001搭載的鷹眼視覺融合感知系統（Falcon Eye Vidar）配置有15顆高清攝像頭，其中7顆8MP長距離高清攝像頭、4 個短距環視高清攝像頭、2 個車內監測攝像頭、1 個車外監測攝像頭和1 個后置流媒體攝像頭。在控制芯片上采用2顆Mobileye EyeQ5芯片，芯片算力接近50TOPS。
2021年上海車展，大疆車載的D130和D130+自動駕駛解決方案均采用了800萬像素的前視雙目攝像頭。
a. 感知解決方案：激光雷達（前置）*1 + 前置毫米波雷達*1 + 角雷達*4 + 前視（8MP雙目 - 兩個攝像頭參數規格完全相同）+ 環視*4 + 后視*1（2MP）+ DMS監控攝像頭*1
b. 智能駕駛中央域控制器（算力可達100TOPS）
D130/D130+ 自動駕駛系統解決方案（圖片來源：大疆宣傳資料）
2021年上海車展，地平線發布了自動駕駛解決方案Matrix Mono和Matrix Pilot。
—— Matrix Mono采用800萬像素單目攝像頭，控制器采用地平線征程3，實現L2級自動駕駛功能。
—— Matrix Pilot 采用6顆攝像頭：1顆前置800萬像素單目攝像頭，120°水平視場角；另外5顆攝像頭為200萬像素，100°水平視場角，分別位于車身左右兩側及后側，用于探測車輛斜前方，斜后方及后方的交通狀況?？刂破鞑捎玫仄骄€征程3，實現L2+級自動駕駛功能。
Horizon Matrix Pilot 攝像頭布局參考（圖片來源：地平線宣傳資料）
三、800萬像素攝像頭與算力、算法以及數據的關系
隨著800萬像素攝像頭在2021款理想One上首次量產應用，800萬像素攝像頭的議論熱潮再次興起。有一個話題大家普遍很關注，那就是800萬像素攝像頭與算力、算法以及數據之間的關系，例如：如果用800萬像素攝像頭代替之前低分辨率攝像頭，需要多大算力的芯片的支持？原來的算法是否需要重寫？采用低像素攝像頭積累的數據，現在是否能還能復用？
1. 800萬像素攝像頭與算力
攝像頭算力需求跟哪些因素有關？對于車輛配置1個或多個800萬像素攝像頭，大致需要多大的算力支持，這個是否有計算公式可以評估？攝像頭對計算平臺算力的需求，不僅跟攝像頭自身的性能參數有關，比如攝像頭的位數、分辨率、幀率等，同時也與攝像頭的應用場景以及采用的算法模型有很大關系。如果算法固定，識別同樣的東西，肯定是攝像頭的分辨率越高，需要的算力越大；但是，從總體來講，攝像頭的應用場景和所采用的算法模型和算法策略對算力的影響是更大的。
針對此問題，筆者專門請教過德賽西威副總裁李樂樂，他的看法是：“攝像頭分辨率越高，需要的數據存儲量肯定越大，計算能力需求也會更大。但是多大的分辨率對應多大的算力，是沒有直接對應關系的，也是不太好直接用公式去衡量。
“ 比如現在新勢力規劃的車型，攝像頭的配置基本差不多，但是計算平臺的算力差別卻很大，這是為什么呢？首先，因為他們的算法模型可能本身就不太一樣；其次，系統對算力的需求是持續提升的，硬件的算力資源需要提前預留好，他們對算力資源的預留程度層面的考慮也是不同的。
“ 同時，跟具體的應用場景也有很大關系，以前視為例，基于同樣分辨率的攝像頭，如果其應用場景僅限于識別車輛、行人、車道線這三類目標，其對算力的需求相對來說是一個輕量級的。
“ 若其應用場景需要系統識別的目標更多、探測的距離更遠、識別的精度更高，不但要識別上述三類目標，還要識別紅綠燈、限速牌、路標、路桿、多車道車道線等。障礙物的區分不僅包括車輛、行人，還包含了騎自行車人和騎三輪車人，甚至還增加非標準目標進行檢測，這樣的應用場景對算力的需求肯定是更大量級的?！?/span>
2. 800萬像素攝像頭與算法
如果用800萬像素攝像頭代替之前低分辨率攝像頭，原來的算法是否需要重寫？大部分專業人士給出的答案是：不需要完全重寫，部分可用，部分需要重寫。至于需要重寫的部分占多大比例，是沒有一個明確答案的，因為不同OEM有著不同的開發現狀和開發計劃。
其中一位專業人士告訴筆者：“使用高分辨率攝像頭后，其實在算法方面并不需要完全重寫，但深度學習的模型需要重新訓練，原有的數據積累可以作為預訓練使用，不過仍需采集新的高像素數據一起使用。”
針對此問題，德賽西威的李樂樂這樣表示的：“算法模型是不是一定要調整，一方面跟攝像頭有關，另外也跟控制器的SoC也有很大的關系。
“對于支持100萬像素攝像頭的控制器，其大概率是比較低等級的，計算能力是偏弱的，應用場景也比較簡單，比如車道線檢測，或者是用于簡單的目標識別加雷達融合做ACC和AEB。這些應用場景的大部分算法可能還是基于計算機視覺的一些模式識別算法，也許都還沒有用到神經網絡。
“對于簡單的應用場景和傳統的算法，通過ARM處理器就可以完成，甚至都不需要通過加速器來做，即使是AEB，隨著NCAP標準的升級，攝像頭分辨率和角度需要更大才能進一步支持，處理器也就需要更強的性能，算法對應也是需要進一步升級，算法的策略和工程化的積累雖然可以繼承，但也不能完全照搬，也需要同步升級。
“而現在800萬像素攝像頭所采用域控制器的SoC算力肯定會更強，多采用基于AI的算法，并且算法模型的復雜度也會更高。對于這種情況，原來的算法大多是不能復用的，能復用的主要是策略方面的算法。”
也就是說，若是前后兩代系統采用的控制器芯片SoC類型相同，并且原來采用的就是當前流行的神經網絡模型和深度學習算法，那么攝像頭升級到800萬后，原來的算法模型大多可以復用，但往往算法的進步也非?？?，一代產品的算法有一代產品算法的局限性，通常也要跟著芯片的升級而升級。
比如小鵬的Xpilot3.5系統，前視采用三個200萬像素攝像頭，主控芯片采用英偉達的Xavier來驅動的。下一代控制器SoC要升級到英偉達的Orin X芯片，其提供的算力更高，攝像頭也要升級到800萬像素，因為兩代SoC的類型相同，上一代的算法模型這一代基本是可以復用，但也一定會升級和更加復雜以提高其綜合性能。
3. 800萬像素攝像頭與數據
自動駕駛的算法模塊，尤其是感知和預測模塊，基本都是數據驅動，可見數據對算法迭代的重要性。那么之前通過低分辨率采集的數據，攝像頭升級為800萬像素，在算法模型訓練的時候是否可用呢？
答案是可以的。800萬像素攝像頭可以通過之前的數據去訓練算法模型來繼承原來的一些能力，比如檢測的準確率和誤檢率。但是800萬像素攝像頭探測的距離更遠了，需重新采集之前所沒有的數據，去應對新的場景，去拓寬自己的性能邊界。
以特斯拉為例，即便這些年通過影子模式已經積累了大量的場景數據，若是換成800萬像素攝像頭，通過之前的數據能夠繼承200萬像素攝像頭的一些基礎性能，但仍會有大量場景數據依然還是需要再重新采集的，用于不斷地去迭代算法模型，進而無限地逼近800萬像素攝像頭的最佳性能效果。
1. 800萬像素攝像頭未來的主要應用場景有哪些？
800萬像素車載攝像頭未來應用場景包括：周視（前視、側視、后視）、環視、電子后視鏡攝像頭以及艙內攝像頭等；其中前視以及艙內攝像頭是在不久的將來最有可能規?；茝V應用的主要場景。
對于前視場景，它是對高分辨率攝像頭最迫切的一個應用場景，因為前視需要解決的場景最多，目標識別任務最復雜。其應用場景既需要有較高的圖像分辨率能夠識別更遠距離的小目標物體，也需要有一定范圍的視場角以便于及時對切入到本車道的目標做出反應。
對于側視和后視場景，它們的探測距離沒有前視探測要求的那么遠，攝像頭的目標識別任務相對簡單。主要探測目標就是側方車道和本車道的移動目標，不需要識別紅綠燈、路標等任務。目前200~500萬像素攝像頭完全可滿足側/后視的應用需求；綜合考慮成本和性能，短期內來看，側/后視對800萬像素攝像頭的需求反而并沒有那么迫切。
對于艙內視覺應用場景，一些傳統OEM為了提升其豪華和科技感，其豪華品牌會在艙內配置高分辨率彩色的攝像頭（800萬像素攝像頭），用于滿足艙內的娛樂和辦公需求，比如自拍，開視頻電話會議等。
對于電子后視鏡應用場景，目前主流還是200萬像素的，但是未來是需要800萬像素攝像頭的。電子后視鏡對攝像頭的幀率是有需求的，至少需要達到90幀。從長期來看，電子后視鏡和側后視的攝像頭是有共用趨勢的。
對于環視應用場景，攝像頭主要是提供圖像給人察看，還可用于感知輔助，比如當前車道線的檢測，輔助系統完成對車道線的識別和感知。當前應用的魚眼攝像頭分辨率主要分布在100萬像素-200萬像素之間，其中100萬像素左右的魚眼攝像頭已經規?；瘧茫?00萬像素的環視才剛剛逐漸開始量產應用。
2. 800萬像素攝像頭相比100~200萬像素攝像頭，它具備哪些性能優勢？攝像頭分辨率上的提升是否會對其他性能參數帶來影響？
能夠具備在更遠探測距離的同時，還可以具備較大的視場角。以前視攝像頭為例，100~200萬像素攝像頭有效探測距離在100~150m的時候，視場角卻只有50°左右，但是800萬像素攝像頭，卻可以在實現200~250m探測距離的同時，還可擁有120°左右的視場角。
同時，高分辨率攝像頭還具備更高的動態范圍（HDR）和 更優的LED頻閃消除功能（LFM）。
同等條件下，攝像頭分辨率越高，其單像素尺寸就會越小，這樣的話，在低照度下的光電轉換效率就會低一些，從而影響在光照不足時攝像頭的表現。高分辨率攝像頭好處在于能夠看得更遠，更清晰，但是其夜間感知效果相對會差一些。因此系統在選擇攝像頭的時候不能一味地去追求高像素，需要做一個平衡。
3. 在800萬像素攝像頭的應用上，國外傳統OEM相比造車新勢力處于一個相對比較保守的狀態，為什么會出現這樣一種現象？
首先，開發流程和方法理念是不太一樣的；國內造車新勢力，對于新產品和新技術的應用相對來說是比較激進一些的，采用快速迭代的方法，在技術和產品還沒有完全成熟之前就已經開始應用。然而對于國外的傳統主機廠，他們對開發流程的要求相對來說是比較高的，導致開發周期就比較長。
其次，國外的傳統OEM目前主要還是以與Mobileye合作為主。在算法上，大部分OEM還是依賴Mobileye的算法。如果換成一家和算法解耦的芯片公司，比如像英偉達的大算力平臺，或者其他更高算力的計算平臺，還需要相應算法能力的支持， 但是目前歐洲缺少這樣的算法公司去做這些事情。如果OEM要采用高分辨率的做多攝像頭方案，若沒有高算力的計算平臺和與之相匹配的算法能力，單純的去使用高分辨率攝像頭也是沒有意義的。。
1. LiDar 還在磨磨蹭蹭，800 萬像素攝像頭都上車了
https://mp.weixin.qq.com/s/K6_9QngalBKR8Q39NVQNyw
2. 800萬像素攝像頭上車的背后故事
https://mp.weixin.qq.com/s/Aw5r-fRhAHvIWnqtxQSk-A
3. 車載攝像頭的技術趨勢 — 智能攝像頭
https://mp.weixin.qq.com/s/vQ2HGn-pGYcPJUbdFaGcWQ
4. 理想ONE“帶頭”800萬像素，未來5年超1200萬顆市場潛力股
https://mp.weixin.qq.com/s/ugYkeMDqlZdUmUR0e1aV0w
5. 國內首家！量產征程3還有800萬像素攝像頭，地平線ADAS上路實測
https://mp.weixin.qq.com/s/ztFuuGGRjoDuapYJMXsmkA
6. 做自動駕駛Tier 1，大疆憑什么？
https://baijiahao.baidu.com/s?id=1697743862425396932&wfr=spider&for=pc
7. 車載攝像頭專家會議紀要
https://mp.weixin.qq.com/s/u9YY3sAxUEAxxWfcyw0UKg
8. 某豪華車開始用Mobileye的EyeQ5攝像頭技術，會是誰
https://news.yiche.com/hao/wenzhang/37812137/
9. 一文熟悉車載攝像頭技術的現在和未來
https://mp.weixin.qq.com/s/61QNhDeN6U_iXT1FXWTN2w
10. 中金公司證券報告：車載攝像頭：揚帆汽車智能化浪潮，部署迎來量速齊升
11. 東方證券：自動駕駛駛入快車道，車載光學迎來加速放量
12. 國金證券：智能駕駛方興未艾，車載光學長坡厚雪
更多關于車載攝像頭的行業資訊，請加入艾邦車載攝像頭交流群，上汽、長城、吉利、比亞迪、德賽西威、華陽、維寧爾、大陸、博世、航盛、舜宇、歐菲、聯創、信利、同致電子、聯合光學、鳳凰光學、水晶光電、sunex、艾邁斯、豪威科技、漢高、3M、日東、羅姆化學等產業鏈上下游企業均有加入，歡迎掃描下方二維碼進行探討。
推薦閱讀：
2022年第二屆車載攝像頭產業鏈高峰論壇
The 2nd Automotive Camera Industry Chain Summit Forum in 2022
4月14日 上海卓越鉑爾曼大酒店
14th april.2022
Pullman Shanghai Qingpu Excellence
一、會議議題
|
NO.
|
議題Topic
|
邀請嘉賓 Invited speakers
|
|
1
|
車載攝像頭相關應用標準解讀及測試方案
|
中國汽車工程研究院 高級工程師 李林峰
|
|
2
|
電子后視鏡的技術發展路徑與應用前景介紹
|
東風集團 科技創新部 王子豪
|
|
3
|
車載攝像頭在智能汽車時代的應用場景解讀
|
智己汽車 鈕晨霄
|
|
4
|
新豪威-自動駕駛賦能者
|
豪威集團 汽車電子業務拓展總監 孫磊
|
|
5
|
可支持夜間以及低能見度下行駛的攝像頭感知系統
|
軒轅智駕 產品經理 劉濤
|
|
6
|
高算力視覺芯片在車載攝像頭的應用方案
|
地平線
|
|
7
|
水汽捕集泵在攝像頭真空鍍膜領域的應用
|
北京天地精儀科技 總經理 宋艷霞
|
|
8
|
車載攝像頭的核心部件光學鏡片的工藝技術介紹
|
麗景科技
|
|
9
|
寶理材料在攝像頭產業應用案例與技術解析
|
擬邀請：寶理材料
|
|
10
|
虹軟視覺技術賦能智能汽車安全駕駛
|
擬邀請：虹軟科技
|
|
11
|
CCD攝像頭激光焊接工藝
|
擬邀請：三束激光
|
|
12
|
自動駕駛時代視覺傳感器的應用案例介紹
|
擬邀請：Momenta，知行科技
|
|
13
|
電子后視鏡的技術發展路徑與應用前景介紹
|
擬邀請：常州 斯伯銀
|
|
14
|
連接技術解決方案在車載攝像頭鏡頭組的應用案例
|
擬邀請：安費諾
|
|
15
|
車載攝像頭膠合材料-UV膠的材料應用介紹：
|
擬邀請：漢高，道康寧
|
|
16
|
基于FPGA攝像頭圖像采集顯示系統介紹
|
擬邀請：京微齊力（北京）科技
|
|
17
|
車載攝像頭CMOS圖像傳感器解決方案介紹
|
擬邀請：sony
|
|
18
|
ADAS鏡頭與標定做法實例介紹
|
擬邀請：珠海華亞，德賽自動化，珠海廣浩捷
|
二、收費標準
|
參會人數
|
1~2個人
|
3個人及以上
|
|
3月13日前付款
|
2700元/人
|
2600元/人
|
|
4月13日前付款
|
2800元/人
|
2700元/人
|
|
現場付款
|
3000元/人
|
2800元/人
|
★費用包括會議門票、全套會議資料、午餐、茶歇、晚宴等，但不包括住宿；
三、報名方式
報名方式一：
演講或贊助：
范先生：15800874409（微信同號）
auto@aibang.com
請加微信了解詳情報名：
鄧小姐：15817337805（微信同號）
掃描上方二維碼即可在線報名
閱讀原文即可報名
原文始發于微信公眾號（智能汽車俱樂部）：一文帶你了解800萬像素車載攝像頭
