双目和单目摄像头区别(双目立体感知走下神坛)
双目和单目摄像头区别(双目立体感知走下神坛)
2024-11-05 10:13:22  作者:萌宝贝  网址:https://m.xinb2b.cn/tech/ghj483072.html

一直以来,双目立体感知技术是辅助驾驶赛道的小众路线。

支持者认为,立体感知接近人眼仿生概念,基于三角测量原理,利用成像设备从不同的位置获取被测物体的两幅图像,通过计算图像对应点间的位置偏差,来获取三维几何信息,最显著的优势就是对于深度信息的有效解读。

从目前市场的整体情况来看,2MP双目立体感知将主要用于低阶智能驾驶,8MP将主要用于高阶智能驾驶。同时,市场还在演化出一些新的技术路线,比如双目立体感知基础上的AI深度学习,增加红外感知能力等等。

近年来,除了传统几家海外玩家(比如,Veoneer、大陆集团、博世),来自中国的华为、大疆等企业也在布局双目立体感知方案,国内也有不少车型陆续开始搭载这种方案。

而在此之前,双目立体感知方案仅限于斯巴鲁、宝马、奔驰、捷豹路虎等少数品牌车型。

近年来,一些企业还通过与空气悬架的概念结合,推出了基于双目立体感知的“魔毯”功能。不过,这也受制于空气悬架的前装搭载能否成为主流趋势。当然,还有其他技术可以替代双目立体感知方案。

但质疑者也有很多,比如,硬件上需要两个精确配准的摄像头,而且需要保证在车辆运行过程中始终保持配准的正确性。软件上的算法需要同时处理来自两个摄像头的数据,计算复杂度较高,算法的实时性难以保证。

这也是大疆在推广双目立体感知方案时,特别强调的部分:双目立体视觉感知系统采用在线自标定技术,能有效避免因温变、振动等环境因素而引起的基线变化所导致的感知性能下降,让产品更稳定可靠。

此外,尽管近年来双目立体感知方案的成本在逐步下降,但和单目方案相比,车企的供应商可选择性(替代)较少,相应的算法和规控技术,尤其是底层技术堆栈的软件工程师相对缺乏。同时,包括基线、耐久之后的像素匹配鲁棒性,还有容错率的评估,对于大部分车企验证系统来说,都非常困难。

与此同时,“短基线”间距的问题依然困扰双目立体视觉的可靠感知测距范围,尽管也有企业开始在研发不依赖于固定基线的解决方案。而从市场进展来看,前装量产搭载仍然是难以起量。

高工智能汽车研究院监测数据显示,2022年1-6月中国市场(不含进出口)乘用车新车搭载双目立体感知方案交付上险仅为11.23万辆(占所有感知方案比重不到3%),同比更是下滑1.66%。

同时,双目立体感知方案的安全可靠是否真的能够超过目前的单目方案?

作为全球最早大规模搭载双目立体感知方案的斯巴鲁,在去年权威机构发布的辅助驾驶事故调查报告中,其与特斯拉、本田一起成为三家提交事故报告最多的品牌。

就在今年初,有不少车主投诉,斯巴鲁EyeSight系统的AEB紧急制动功能会出现随机激活的问题,包括在道路上没有障碍物的情况下。这意味着,双目立体视觉技术同样和单目一样,存在一定的感知盲区。

有意思的是,日前在斯巴鲁最新推出的EyeSight辅助驾驶系统中额外增加了一颗单目广角摄像头,用于识别立体相机视角无法覆盖的范围。按照该公司给出的报告称,当车辆以低速进入十字路口时,额外的单目摄像头提高了识别行人和自行车(骑行人)的性能。


显然,在经历了数次技术迭代之后,斯巴鲁EyeSight这套经典的双目立体感知方案也感受到了系统在面临不同场景时的可靠性压力。而主流的单目感知方案,也在不断升级。

比如,2019年,在第三代视觉产品IFVS-500的研发中,智驾科技MAXIEYE通过算法的创新,提出基于单帧图像的深度估计,实现三维立体场景构建,并基于三维信息,实现精准测距测速,平均精度误差达到5%以内。

这一代产品突破了传统单目视觉的感知局限,能够识别实线、虚线、双实线等7种以上车道线以及停止线、斑马线,支持三维数据输出。同时可以进行可行驶区域的检测,预估路面坡度、地形。

此外,随着车身环绕摄像头数量的增加、摄像头像素的提升,类似特斯拉、Mobileye的单目多摄像头感知技术已经成为市场的主流方案。同时,4D成像雷达 激光雷达的组合,提供充分的感知冗余。

高工智能汽车研究院监测数据显示,今年上半年单目多摄像头环绕感知方案交付上险达到27.63万辆,同比增长95.82%,加上今年下半年还有多款主力车型上市交付,将继续保持高增速趋势。

考虑到单目感知技术的成熟,再加上4D雷达 激光雷达的融合,充分发挥4D感知传感器的作用,从而弥补传统深度学习方法无法实现的动态精度感知。

比如,按照Mobileye给出的方案,L4级系统是基于360度环绕的摄像头(前向可以采用多颗单目摄像头)、4D成像雷达,只需要一个高分辨率的前置FMCW激光雷达,就可以实现纯视觉感知、4D成像雷达 激光雷达两套并行的冗余感知组合。



同时,为了充分利用多摄像头环绕的优势,包括特斯拉、Mobileye等公司也在推动不受限于特定位置摄像头(仅仅解决前向还是不够的)的Vidar感知技术(产生类似双目立体的点云),利用神经网络模型来实现3D深度感知。

比如, 通过多个计算机视觉感知引擎,并在后期进行融合,配合基于神经网络的三维物体检测引擎、基于神经网络的场景分割引擎和经典的计算机视觉引擎。多个视图进行三角测量(或单一摄像头的多帧图像)并创建深度图(转换为点云),基于类似激光雷达的点云处理算法。

  • 奶茶店需要怎么经营(这9个细节你应该知道)
  • 2024-11-06这9个细节你应该知道经营是一个讲究细节的工作,任何一个细节的遗漏都可能对产生不好的影响那么奶茶店经营需要注意哪些细节呢?1、开店时,建议先打开开水机,否则会影响煮茶、煮珍珠等工作煮珍珠时,珍珠倒进去时要搅拌2分钟,不然容。
  • 绝对的演技派女孩有前途吗(三十而已中不完美的)
  • 2024-11-06三十而已中不完美的作者:王彦“我叫顾佳,后会无期”她和浮夸“太太圈”决绝挥别的模样,一如当初费尽思量地来顾佳,一个不算完美但总在追求完美的角色,一个自律的同时眼里也揉不得沙子的女性,如今是社交媒体最具话题度的人物之一而。
  • 新手必看摄影干货(摄影小白成长录)
  • 2024-11-06摄影小白成长录背景简介近半年有空余的时间都在在尝试玩耍夜晚的摄影玩法,总结了一下经验分享给大家网上还有贼多教程,如有雷同也只能纯属巧合了夜晚玩的摄影,第一个想到的应该是星空吧,那第一期就先介绍一下星空拍照技巧课题详。
  • 医考成绩查询时,忘记密码和准考证号怎么办?
  • 2024-11-06医考成绩查询时,忘记密码和准考证号怎么办?近期考生们都很关心成绩什么时候出?网上也很多查分公布的小道消息,同学们请以官方通知为准这两天也有很多同学问:成绩查询时,忘记密码怎么办?准考证丢了还能查分吗?今天跟大家说说查分准备问题,大家可以了解下。
  • 王者荣耀五个符号都代表什么(王者荣耀月亮符号有哪些)
  • 2024-11-06王者荣耀月亮符号有哪些王者荣耀月亮符号有哪些?月亮符号怎么打?有一些玩家在找月亮星星符号,想要改名字的时候用上,琵琶网小编下面就给大家分享有关的符号代码王者荣耀月亮星星特殊符号大全月亮符号其实不算多,就是满月、新月、残月、。
  • 明道和陈若轩谁厉害(有点看不起自己)
  • 2024-11-06有点看不起自己昨天看了《演员青就位》在首轮PK中,是陈凯歌战队的明道与陈若轩进行对决从正式演出的情况来看,明道的表演明显好过陈若轩,但最后陈凯歌却将明道给淘汰了,此举立即引起网友热议跟《演员的诞生》和《我就是演员》。
  • 张家界桑植县脱贫路(张家界乡村扶贫见闻)
  • 2024-11-06张家界乡村扶贫见闻在湖南张家界慈利县溪口镇云岩村,村民们正在给红薯种育苗(新华社发汪海云摄)新华社长沙4月16日电(记者阮周围)“多亏了驻村帮扶工作队,老年劳动力也有了就业机会”67岁的湖南张家界慈利县溪口镇云岩村村民。
  • 牛心柿子口感怎么样
  • 2024-11-06牛心柿子口感怎么样答:牛心柿子口感更甜好常见的柿子品种有黑柿、方柿、牛心柿、磨盘柿、鸡心柿、火晶柿等,在这些品种中,牛心柿种植广泛,所以这个品种也比较好牛心柿的形状和黑柿一样,产地主要在陕西,肉质好,果实型大,平均在2。
  • 传统冬至节必吃的(今日冬至应景)
  • 2024-11-06今日冬至应景今天是二十四节气中的冬至从今天起,一年中最冷的“数九”寒冬正式拉开序幕中国幅员辽阔,冬至这一天,各地都有着不同的“应景”美食一起来看看吧!(文案:张倩制图:张悦鑫)饺子“冬至到,吃水饺”在我国北方有冬。
  • 狗狗被蜜蜂蛰了的(狗狗被蜜蜂蛰过后)
  • 2024-11-06狗狗被蜜蜂蛰过后如果你有一只可爱的小狗,你一定会尽最大的努力去照顾它,但有的时候,调皮的它们可能会因为觉得有趣去追赶一些小鸟、蚊虫,玩耍过后,可能会吃掉这些“战利品”,但对于狗狗们来说,蜜蜂就有点“可怕”了,因为当狗。
  • 紫薇花的优美诗句(清新秋色紫薇八首)
  • 2024-11-06清新秋色紫薇八首#头条创作挑战赛#秋花紫薇古诗八首:晓迎秋露一枝新,只有薇花照眼明秋风秋雨秋凉起在农历八月,秋阴漠漠虽然草木慢凋,树木依然青葱,但是花事却稀少荷花已经接近尾声,巨大的荷叶,渐渐有了破缺的态势,荷花虽然。
  • 小升初的语文课外知识(小升初语文课外百科常识汇总)
  • 2024-11-06小升初语文课外百科常识汇总1、民间四大传说:白蛇与许仙孟姜女寻夫牛郎织女梁山伯与祝英台2、我国“四书五经”:《大学》《中庸》《论语》《孟子》《诗》《书》《礼》《易》《春秋》3、我国四大史书:《春秋》(吕不韦)《左传》(左丘明)。