弁言跟着汽车智能化水准的晋升，汽车的智能化功效、文娱属性等成为主机厂打制区别化的重心宗旨。车载摄像头举动汽车的眼睛，是打制智能驾驶和智能座舱必备的视觉

跟着汽车智能化水准的晋升，汽车的智能化功效、文娱属性等成为主机厂打制区别化的重心宗旨。车载摄像头举动汽车的“眼睛”，是打制智能驾驶和智能座舱必备的视觉感知传感器。

从辅助驾驶到无人驾驶，车载摄像头的行使需求从成像镜头向感知镜头转化，运用场景由简单场景向众方位场景拓展，行使数目由单摄向众摄迈进。总之，改日车载摄像头的运用数目会络续拉长，摄像头的诀别率越来越高。

正在低速泊车行使上，从最早只要一个倒车后视摄像头，自后起色到4~5个环顾摄像头；行车辅助行使上，从最动手1个前视单目摄像头，起色到自后的前视三目、四目以及侧视和后视共计7~8行车辅助摄像头，以至有些车内还设备有驾驶员监控摄像头和旅客监控摄像优等。

受功效需乞降规矩战略驱动，以及摄像头硬件本钱的消浸的影响，一个L2+级其它智能化汽车装备11个以上的摄像头将会是许众数的形势。

汽车智能化对车辆自己太平、行人太平以及驾驶员监控等主动太平提出了更高的央浼；摄像头举动最为最紧要的车载传感器，能够阐述如下效力：

车外处境监控：a. 辅助或替代驾驶员感知外部处境，譬喻车道偏离预警、交通记号识别、行人/骑自行车人-AEB等。b. 替代内/外后视镜供应图像给驾驶员，跟着规矩的推动，摄像头将会代替古板的内/外后视镜去“监控”后方和侧后方的处境情况。

车内处境监控：驾驶员监控体例DMS延迟到乘员监控体例OMS，其监测范畴从驾驶员放大到全豹座舱内的物体检测，譬喻车内儿童遗忘监测、座舱特殊境况监测等。

汽车智能化的升级促使汽车太平技能规范也相应地晋升，欧盟的E-NCAP、美国的IIHS以及中国的C-NCAP评判测试中络续扩充主动太平技能的机能测试，包罗以前视摄像头为主传感器所告终的AEB、FCW和LDW等驾驶辅助功效和基于舱内摄像头告终的驾驶员监测和乘员监测等功效。

紧要国家和区域政府仍然拟定岁月表周详标配AEB，而且战略的遮盖范畴从商用车范畴慢慢扩展到乘用车范畴。

欧盟和日本先后于2016、2017年铺开对电子外后视镜的规矩局部，汽车电子外后视镜率先正在这两个区域获取起色。

我国尚不答允电子外后视镜替代古板后视镜，但2020年6月，工信部公布《机动车辆间接视野装配机能和装配央浼》咨询观点搞，为国内电子外后视镜商场的行使吃下了一颗“定心丸”。

欧盟E-NCAP公布的最新2025途径月动手，扫数新车都务必装备DMS。正在中国，宇宙性的商用车DMS体例强制装配规矩仍然正在调研立项之中，最疾希望正在本年尾出台。

体例职掌会合化架构驱动硬件简化，摄像头也逐步被从新界说为“只搜集、不谋划”的轻量化传感器开发。古板摄像头计划需告终图像搜集&视觉处罚两大功效，但正在整车E/E 架构进化趋向下，ECU 由漫衍式演变为会合式，算力向重心会合的同时，包罗摄像头正在内的传感器硬件得以简化，视觉谋划处罚模块也会向“重心大脑”变动，摄像头将只用于“图像搜集”。

摄像头的硬件组成变得特别纯粹，CIS、镜头成为最焦点部件，摄像头的硬件本钱大幅消浸。有业内人士提出：“120万像素的摄像头均匀正在150元，500万像素摄像头价钱或许正在300元支配，800万像素摄像头价钱或许正在500元支配。”

跟着自愿驾驶级其它晋升，对摄像头的央浼也越来越高；车载摄像头最动手的行使是倒车辅助和行车记实，紧要是把摄像头拍摄的图像和视频供人观测，几十万像素的诀别率也根基能够知足央浼。跟着功效和行使场景的扩展，摄像头行使重心变动到了正在驾驶经过中辅助体例举行方圆处境感知。

体例对摄像头的诀别率央浼越来越高，从最动手30万像素升级到100众万像素，又起色到现正在的200万像素，而且跟着技能的进一步晋升以及商场需求的促使，改日的高级别自愿驾驶车辆中都正在计议行使800万级其它高清像素摄像头，用于对更远隔断的目的举行识别和监测。

车企是否行使800万像素摄像头，本钱坚信是一方面，另一方面还要看车企是否具备相配套的技能才干。某车企自愿驾驶控制人曾说过：“堆砌硬件会给人一种谬误的认知，以为传感器越众自愿驾驶的才干就越高，但假设测试和算法跟不上，硬件堆砌再众也没用。”

假设每个摄像头都到达800万像素，谋划平台处罚数据的难度也正在增大，集体体例本钱肯定也会扩充。所以不行单看摄像头的本钱，还须要从全豹体例的角度去看。同时，车载摄像头并不是像手机那样拼像素的才干，还需具备与高诀别率摄像头配套的算法才干。

假设没有与高诀别率摄像头的相立室的算法和测试才干，那无疑于“小马拉大车”。固然采用了一个较高的设备，然则机能晋升却有限。这种境况下，高诀别率摄像头的机能仍然是无法宽裕阐述出来的。那样的线万像素摄像头便成了一个“花瓶”，只是吸援用户的噱头云尔。

固然集体上来讲，算法和测试才干也许还未能跟得上摄像头技能起色的步骤。然则高诀别率摄像头这个改日的行使趋向是无须置疑的，它是技能和商场“双轮驱动”的肯定结果。

正在本年的上海车展上极少OEM告示了800万像素摄像头的搭载方案，同时极少供应商也正在其自愿驾驶感知处理计划中采用了800万像素摄像头举动前视行使场景中的紧要传感器。

环球首个量产行使800万像素摄像头的车型，前置摄像头由原本的单目130万像素升级到800万像素，秤谌视场角由原本的52°扩展到120°，对车辆和行人的最远有用探测隔断由150m支配晋升到200m以上。

正在职掌决定芯片上，2021 款理念ONE辅助驾驶芯片仍然从EyeQ4换成了地平线TOPS。

蔚来ET7方案于2022年第1季度上市，该车搭载了11个8MP摄像头，此中包罗7个行车辅助摄像头（4个前向 + 3个后向）和4个环顾摄像头。此中行车辅助摄像头的供应商为联创电子，环顾摄像的供应商为德赛西威。

正在职掌芯片上，蔚来ET7采用自研的超算平台-NIO Adam，它包罗2颗主控芯片、1颗冗余备份芯片、1颗群体智能与天性熬炼专用芯片共计4颗英伟达Orin芯片组成，算力共计1016TOPS。

极氪001搭载的鹰眼视觉协调感知体例（Falcon Eye Vidar）设备有15颗高清摄像头，此中7颗8MP长隔断高清摄像头、4 个短距环顾高清摄像头、2 个车内监测摄像头、1 个车外监测摄像头和1 个后置流媒体摄像头。正在职掌芯片上采用2颗Mobileye EyeQ5芯片，芯片算力挨近50TOPS。

2021年上海车展，大疆车载的D130和D130+自愿驾驶处理计划均采用了800万像素的前视双目摄像头。

a. 感知处理计划：激光雷达（前置）*1 + 前置毫米波雷达*1 + 角雷达*4 + 前视（8MP双目 – 两个摄像头参数规格十足无别）+ 环顾*4 + 后视*1（2MP）+ DMS监控摄像头*1

2）地平线年上海车展，地平线公布了自愿驾驶处理计划Matrix Mono和Matrix Pilot。

—— Matrix Pilot 采用6颗摄像头：1颗前置800万像素单目摄像头，120°秤谌视场角；此外5颗摄像头为200万像素，100°秤谌视场角，永诀位于车身支配两侧及后侧，用于探测车辆斜前线，斜后方及后方的交通情况。职掌器采用地平线+级自愿驾驶功效。

跟着800万像素摄像头正在2021款理念One上初次量产行使，800万像素摄像头的说论高潮再次兴盛。有一个话题民众众数很眷注，那即是800万像素摄像头与算力、算法以及数据之间的干系，比如：假设用800万像素摄像头替代之前低诀别率摄像头，须要众大算力的芯片的援救？原本的算法是否须要重写？采用低像素摄像头积蓄的数据，现正在是否能还能复用？

摄像头算力需求跟哪些成分相闭？看待车辆设备1个或众个800万像素摄像头，大致须要众大的算力援救，这个是否有谋划公式能够评估？摄像头对谋划平台算力的需求，不但跟摄像头自己的机能参数相闭，譬喻摄像头的位数、诀别率、帧率等，同时也与摄像头的行使场景以及采用的算法模子有很大干系。假设算法固定，识别同样的东西，坚信是摄像头的诀别率越高，须要的算力越大；然则，从总体来讲，摄像头的行使场景和所采用的算法模子和算法政策对算力的影响是更大的。

针对此题目，笔者特意求教过德赛西威副总裁李乐乐，他的睹地是：“摄像头诀别率越高，须要的数据存储量坚信越大，谋划才干需求也会更大。然则众大的诀别率对应众大的算力，是没有直接对应干系的，也是不太好直接用公式去量度。

“ 譬喻现正在新权力计议的车型，摄像头的设备根基差不众，然则谋划平台的算力不同却很大，这是为什么呢？起初，由于他们的算法模子或者自己就不太雷同；其次，体例对算力的需求是络续晋升的，硬件的算力资源须要提前预留好，他们对算力资源的预留水准层面的探求也是差别的。

“ 同时，跟简直的行使场景也有很大干系，以前视为例，基于同样诀别率的摄像头，假设其行使场景仅限于识别车辆、行人、车道线这三类目的，其对算力的需求相对来说是一个轻量级的。

“ 若其行使场景须要体例识其它目的更众、探测的隔断更远、识其它精度更高，不光要识别上述三类目的，还要识别红绿灯、限速牌、道标、道杆、众车道车道线等。故障物的分别不但包罗车辆、行人，还包括了骑自行车人和骑三轮车人，以至还扩充非规范目的举行检测，如此的行使场景对算力的需求坚信是更洪量级的。”

假设用800万像素摄像头替代之前低诀别率摄像头，原本的算法是否须要重写？大部门专业人士给出的谜底是：不须要十足重写，部门可用，部门须要重写。至于须要重写的部门占众大比例，是没有一个清楚谜底的，由于差别OEM有着差别的开辟近况和开辟方案。

此中一位专业人士告诉笔者：“运用高诀别率摄像头后，实在正在算法方面并不须要十足重写，但深度进修的模子须要从新熬炼，原有的数据积蓄能够举动预熬炼运用，然而仍需搜集新的高像素数据一同运用。”

针对此题目，德赛西威的李乐乐如此默示的：“算法模子是不是必然要调剂，一方面跟摄像头相闭，此外也跟职掌器的SoC也有很大的干系。

“看待援救100万像素摄像头的职掌器，其或许率是比拟低品级的，谋划才干是偏弱的，行使场景也比拟纯粹，譬喻车道线检测，或者是用于纯粹的目的识别加雷达协调做ACC和AEB。这些行使场景的大部门算法或者依旧基于谋划机视觉的极少形式识别算法，也许都还没有效到神经搜集。

“看待纯粹的行使场景和古板的算法，通过ARM处罚器就能够完结，以至都不须要通过加快器来做，纵然是AEB，跟着NCAP规范的升级，摄像头诀别率和角度须要更大才气进一步援救，处罚器也就须要更强的机能，算法对应也是须要进一步升级，算法的政策和工程化的积蓄固然能够承袭，但也不行十足照搬，也须要同步升级。

“而现正在800万像素摄像头所采用域职掌器的SoC算力坚信会更强，众采用基于AI的算法，而且算法模子的繁杂度也会更高。看待这种境况，原本的算法公共是不行复用的，能复用的紧要是政策方面的算法。”

也即是说，倘若前后两代体例采用的职掌器芯片SoC类型无别，而且原本采用的即是暂时时兴的神经搜集模子和深度进修算法，那么摄像头升级到800万后，原本的算法模子公共能够复用，但往往算法的进取也卓殊疾，一代产物的算法有一代产物算法的局部性，普通也要随着芯片的升级而升级。

譬喻小鹏的Xpilot3.5体例，前视采用三个200万像素摄像头，主控芯片采用英伟达的Xavier来驱动的。下一代职掌器SoC要升级到英伟达的Orin X芯片，其供应的算力更高，摄像头也要升级到800万像素，由于两代SoC的类型无别，上一代的算法模子这一代根基是能够复用，但也必然会升级和特别繁杂以普及其归纳机能。

自愿驾驶的算法模块，特别是感知和预测模块，根基都是数据驱动，可睹数据对算法迭代的紧要性。那么之前通过低诀别率搜集的数据，摄像头升级为800万像素，正在算法模子熬炼的时分是否可用呢？

谜底是能够的。800万像素摄像头能够通过之前的数据去熬炼算法模子来承袭原本的极少才干，譬喻检测的切确率和误检率。然则800万像素摄像头探测的隔断更远了，需从新搜集之前所没有的数据，去应对新的场景，去拓宽本身的机能鸿沟。

以特斯拉为例，即使这些年通过影子形式仍然积蓄了洪量的场景数据，倘若换成800万像素摄像头，通过之前的数据不妨承袭200万像素摄像头的极少根本机能，但仍会有洪量场景数据仍然依旧须要再从新搜集的，用于络续地去迭代算法模子，进而无穷地迫近800万像素摄像头的最佳机能成果。

800万像素车载摄像头改日行使场景包罗：周视（前视、侧视、后视）、环顾、电子后视镜摄像头以及舱内摄像优等；此中前视以及舱内摄像头是正在不久的畴昔最有或者界限化增添行使的紧要场景。

看待前视场景，它是对高诀别率摄像头最火急的一个行使场景，由于前视须要处理的场景最众，目的识别职责最繁杂。其行使场景既须要有较高的图像诀别率不妨识别更远隔断的小目的物体，也须要有必然范畴的视场角以便于实时对切入到本车道的目的做出反响。

看待侧视和后视场景，它们的探测隔断没有前视探测央浼的那么远，摄像头的目的识别职责相对纯粹。紧要探测目的即是侧方车道和本车道的转移目的，不须要识别红绿灯、道标等职责。目前200~500万像素摄像头十足可知足侧/后视的行使需求；归纳探求本钱和机能，短期内来看，侧/后视对800万像素摄像头的需求反而并没有那么火急。

看待舱内视觉行使场景，极少古板OEM为了晋升其阔绰和科技感，其阔绰品牌会正在舱内设备高诀别率彩色的摄像头（800万像素摄像头），用于知足舱内的文娱和办公需求，譬喻自拍，开视频电话集会等。

看待电子后视镜行使场景，目前主流依旧200万像素的，然则改日是须要800万像素摄像头的。电子后视镜对摄像头的帧率是有需求的，起码须要到达90帧。从永恒来看，电子后视镜和侧后视的摄像头是有共用趋向的。

看待环顾行使场景，摄像头紧要是供应图像给人观测，还可用于感知辅助，譬喻暂时车道线的检测，辅助体例完结对车道线的识别和感知。暂时行使的鱼眼摄像头诀别率紧要漫衍正在100万像素-200万像素之间，此中100万像素支配的鱼眼摄像头仍然界限化行使，200万像素的环顾才刚才逐步动手量产行使。

2. 800万像素摄像头比拟100~200万像素摄像头，它具备哪些机能上风？摄像头诀别率上的晋升是否会对其他机能参数带来影响？

不妨具备正在更远探测隔断的同时，还能够具备较大的视场角。以前视摄像头为例，100~200万像素摄像头有用探测隔断正在100~150m的时分，视场角却只要50°支配，然则800万像素摄像头，却能够正在告终200~250m探测隔断的同时，还可具有120°支配的视场角。

同时，高诀别率摄像头还具备更高的动态范畴（HDR）和 更优的LED频闪消亡功效（LFM）。

一律条目下，摄像头诀别率越高，其单像素尺寸就会越小，如此的话，正在低照度下的光电转换效劳就会低极少，从而影响正在光照不够时摄像头的出现。高诀别率摄像头好处正在于不妨看得更远，更显露，然则其夜间感知成果相对会差极少。所以体例正在抉择摄像头的时分不行一味地去探索高像素，须要做一个平均。

3. 正在800万像素摄像头的行使上，外洋古板OEM比拟制车新权力处于一个相对照较顽固的形态，为什么会浮现如此一种形势？

起初，开辟流程和办法理念是不太雷同的；国内制车新权力，看待新产物和新技能的行使相对来说是比拟激进极少的，采用迅速迭代的办法，正在技能和产物还没有十足成熟之前就仍然动手行使。然而看待外洋的古板主机厂，他们对开辟流程的央浼相对来说是比拟高的，导致开辟周期就比拟长。

其次，外洋的古板OEM目前紧要依旧以与Mobileye合举动主。正在算法上，大部门OEM依旧依赖Mobileye的算法。假设换成一家和算法解耦的芯片公司，譬喻像英伟达的大算力平台，或者其他更高算力的谋划平台，还须要相应算法才干的援救， 然则目前欧洲短缺如此的算法公司去做这些工作。假设OEM要采用高诀别率的做众摄像头计划，若没有高算力的谋划平台和与之相立室的算法才干，纯朴的去运用高诀别率摄像头也是没蓄意义的。。