双目和单目摄像头区别(双目立体感知走下神坛)
双目和单目摄像头区别(双目立体感知走下神坛)
2024-11-24 04:56:20  作者:萌宝贝  网址:https://m.xinb2b.cn/know/ghj483072.html

一直以来,双目立体感知技术是辅助驾驶赛道的小众路线。

支持者认为,立体感知接近人眼仿生概念,基于三角测量原理,利用成像设备从不同的位置获取被测物体的两幅图像,通过计算图像对应点间的位置偏差,来获取三维几何信息,最显著的优势就是对于深度信息的有效解读。

从目前市场的整体情况来看,2MP双目立体感知将主要用于低阶智能驾驶,8MP将主要用于高阶智能驾驶。同时,市场还在演化出一些新的技术路线,比如双目立体感知基础上的AI深度学习,增加红外感知能力等等。

近年来,除了传统几家海外玩家(比如,Veoneer、大陆集团、博世),来自中国的华为、大疆等企业也在布局双目立体感知方案,国内也有不少车型陆续开始搭载这种方案。

而在此之前,双目立体感知方案仅限于斯巴鲁、宝马、奔驰、捷豹路虎等少数品牌车型。

近年来,一些企业还通过与空气悬架的概念结合,推出了基于双目立体感知的“魔毯”功能。不过,这也受制于空气悬架的前装搭载能否成为主流趋势。当然,还有其他技术可以替代双目立体感知方案。

但质疑者也有很多,比如,硬件上需要两个精确配准的摄像头,而且需要保证在车辆运行过程中始终保持配准的正确性。软件上的算法需要同时处理来自两个摄像头的数据,计算复杂度较高,算法的实时性难以保证。

这也是大疆在推广双目立体感知方案时,特别强调的部分:双目立体视觉感知系统采用在线自标定技术,能有效避免因温变、振动等环境因素而引起的基线变化所导致的感知性能下降,让产品更稳定可靠。

此外,尽管近年来双目立体感知方案的成本在逐步下降,但和单目方案相比,车企的供应商可选择性(替代)较少,相应的算法和规控技术,尤其是底层技术堆栈的软件工程师相对缺乏。同时,包括基线、耐久之后的像素匹配鲁棒性,还有容错率的评估,对于大部分车企验证系统来说,都非常困难。

与此同时,“短基线”间距的问题依然困扰双目立体视觉的可靠感知测距范围,尽管也有企业开始在研发不依赖于固定基线的解决方案。而从市场进展来看,前装量产搭载仍然是难以起量。

高工智能汽车研究院监测数据显示,2022年1-6月中国市场(不含进出口)乘用车新车搭载双目立体感知方案交付上险仅为11.23万辆(占所有感知方案比重不到3%),同比更是下滑1.66%。

同时,双目立体感知方案的安全可靠是否真的能够超过目前的单目方案?

作为全球最早大规模搭载双目立体感知方案的斯巴鲁,在去年权威机构发布的辅助驾驶事故调查报告中,其与特斯拉、本田一起成为三家提交事故报告最多的品牌。

就在今年初,有不少车主投诉,斯巴鲁EyeSight系统的AEB紧急制动功能会出现随机激活的问题,包括在道路上没有障碍物的情况下。这意味着,双目立体视觉技术同样和单目一样,存在一定的感知盲区。

有意思的是,日前在斯巴鲁最新推出的EyeSight辅助驾驶系统中额外增加了一颗单目广角摄像头,用于识别立体相机视角无法覆盖的范围。按照该公司给出的报告称,当车辆以低速进入十字路口时,额外的单目摄像头提高了识别行人和自行车(骑行人)的性能。


显然,在经历了数次技术迭代之后,斯巴鲁EyeSight这套经典的双目立体感知方案也感受到了系统在面临不同场景时的可靠性压力。而主流的单目感知方案,也在不断升级。

比如,2019年,在第三代视觉产品IFVS-500的研发中,智驾科技MAXIEYE通过算法的创新,提出基于单帧图像的深度估计,实现三维立体场景构建,并基于三维信息,实现精准测距测速,平均精度误差达到5%以内。

这一代产品突破了传统单目视觉的感知局限,能够识别实线、虚线、双实线等7种以上车道线以及停止线、斑马线,支持三维数据输出。同时可以进行可行驶区域的检测,预估路面坡度、地形。

此外,随着车身环绕摄像头数量的增加、摄像头像素的提升,类似特斯拉、Mobileye的单目多摄像头感知技术已经成为市场的主流方案。同时,4D成像雷达 激光雷达的组合,提供充分的感知冗余。

高工智能汽车研究院监测数据显示,今年上半年单目多摄像头环绕感知方案交付上险达到27.63万辆,同比增长95.82%,加上今年下半年还有多款主力车型上市交付,将继续保持高增速趋势。

考虑到单目感知技术的成熟,再加上4D雷达 激光雷达的融合,充分发挥4D感知传感器的作用,从而弥补传统深度学习方法无法实现的动态精度感知。

比如,按照Mobileye给出的方案,L4级系统是基于360度环绕的摄像头(前向可以采用多颗单目摄像头)、4D成像雷达,只需要一个高分辨率的前置FMCW激光雷达,就可以实现纯视觉感知、4D成像雷达 激光雷达两套并行的冗余感知组合。



同时,为了充分利用多摄像头环绕的优势,包括特斯拉、Mobileye等公司也在推动不受限于特定位置摄像头(仅仅解决前向还是不够的)的Vidar感知技术(产生类似双目立体的点云),利用神经网络模型来实现3D深度感知。

比如, 通过多个计算机视觉感知引擎,并在后期进行融合,配合基于神经网络的三维物体检测引擎、基于神经网络的场景分割引擎和经典的计算机视觉引擎。多个视图进行三角测量(或单一摄像头的多帧图像)并创建深度图(转换为点云),基于类似激光雷达的点云处理算法。

  • 广东u18女足名单(U17女足亮相世界杯)
  • 2024-11-24U17女足亮相世界杯中国U17女足出战世界杯首战,CBA最火的广州队今晚出战,巴萨遭遇强敌挑战……10月12日,又是一个不平凡的比赛日12日上午9点,在一场NBA季前赛比赛中,马刺队将迎战爵士队本赛季的爵士队令人意外解散。
  • 监控系统安装说明书(监控系统安装工程新手必懂知识)
  • 2024-11-24监控系统安装工程新手必懂知识为了方便大家在监控实际安装中能够解决一些常见的问题,本文对监控安装过程中几个重要的大家比较困惑的问题进行了汇总,方便大家掌握问题一:摄像机装多高?建议室内不低于2.5米,室外不低于3.5米,这些数字虽。
  • 骆驼祥子电影和原著的区别是什么(骆驼祥子电影和原著的不同)
  • 2024-11-24骆驼祥子电影和原著的不同区别:电影版在人物的塑造上,较原作更有所发展祥子偷了骆驼回来,电影上有祥子给老者挑水的细节,书上没有祥子在街上遇见曹先生时,祥子要求送曹先生回家书上曹先生拒绝了,电影上接受了书上对于杨家的描写较详细,。
  • 北极涡旋异常偏强(研究发现反气旋涡造成海表降温)
  • 2024-11-24研究发现反气旋涡造成海表降温近日,中国科学院南海海洋研究所热带海洋环境国家重点实验室(LTO)在海洋中尺度涡对障碍层及海表温度的影响研究中取得新进展中尺度涡是海洋中半径为几十至几百公里的旋转流体北半球顺时针旋转的涡旋称为反气旋涡。
  • 南瓜做的好吃的(简单又好吃)
  • 2024-11-24简单又好吃做南瓜饼,最好是用那种颜色看上金黄色的,而且南瓜肉看上去细腻的,这样的南瓜一般都非常的甘甜,最适合做南瓜饼!只要有好的食材,谁都能做出好吃的美食,做法:南瓜买回来去皮清洗干净之后,放入蒸锅中先蒸熟,蒸。
  • 安家阚太太离婚:阚太太与丈夫同甘共苦被出轨
  • 2024-11-24安家阚太太离婚:阚太太与丈夫同甘共苦被出轨最近,最火爆的电视剧,非《安家》莫属房,对于中国人来说,天生就具备超高的关注度毕竟在中国的传统观念中,没有房就不成“家”;但有的人买房,却不是为了自己的家,而是为了给情人筑一个一个家外小巢电视剧中有一。
  • 怎么用不同寻常造句(讲究造句和解释)
  • 2024-11-24讲究造句和解释讲究(jiǎngjiu),形容词近义词有:讲求,考究,认真,严谨反义词有:随便,粗陋讲求;注重[讲究工作效率]考究,指力求精美完善也指精美完善[许地山《无忧花》:“这两三年来,太太小姐们穿得越发讲究了。
  • 羊水穿刺要疼多久(作为过来人告诉你)
  • 2024-11-24作为过来人告诉你从2月份确认怀孕我们全家都沉浸在甜蜜的幸福中,我们都满怀希望宝宝健康成长,每个月都按时去做产检而这种甜蜜至到出唐筛结果那一天被打破了我还记得很清楚,我一直没有拿到唐筛的报告那是一个周二的下午,我接到一。
  • 漳州教育局最新公告(正在公示漳州市教育局最新发布)
  • 2024-11-24正在公示漳州市教育局最新发布截止2021年3月12日漳州市教育局共审核市直小学朱俊浩、市直中学郭钰冰等274人的转学、休学结果如下——现将这批学生名单予以公告(详见附件),接受社会和群众的监督公示时间从2022年04月29日至0。
  • 古人对衣服的雅称
  • 2024-11-24古人对衣服的雅称中国古代古人对衣服的雅称有裳、锦衣、羽衣、袍服、白丁、白袍、布衣、青衿等雅称古代人对衣服的称呼有很多,因为古代不同阶层的人穿的衣服是不同的,人们会根据不同服饰名称来称呼不同阶层的人比如黄裳,黄色代表金。