本文转载自雷锋网。“雷石聚变”，一个曾经存在但未被放大的技术名词，如今备受瞩目。一方面，宇视等视频物联网企业今年将“雷视融合”提升到公司战略的高度；与此同时，另一边，还有智能驾驶企业西迪智驾，科技企业百度、阿里、腾讯等，也手握Levision整合的相关解决方案，守候在路边。“雷石融合”并不是一种新的解决问题的方式。擅长在各个领域使用这种技术的玩家并不少见。新鲜的是，几家互不相干的功夫门派，这次终于会在同一个十字路口相遇。遇到过，打过。互联网企业、道路行业技术产品供应商、视频物联网企业、车规级雷达供应商、智能驾驶企业……五方势力都在同一把名为“雷视易”的剑耕耘，当然，细细观察就会发现发现每个家庭的开始时间不一样，招式也不一样。一个更诱人的胡萝卜是，期待已久的车路协同很可能被撕开，从而摆脱单点智能，真正开始向“智能汽车”+“智能道路”发展。随着战斗。但问题是，为什么是现在？为什么是他们？“雷士一体化”计划转移到交通领域，真的有用吗？最终谁会赢？五力在自动驾驶行业，普遍认为多传感器融合是未来自动驾驶感知方向的主要发展趋势。同样的故事趋势正在智能交通领域重演。感应线圈、截面雷达、地磁钉等是主要的传统车辆检测器，但普遍存在的问题是只能获取某一截面或瞬时的车辆车道和速度信息。新一代智能车辆检测器为AI摄像头和前向交通毫米波雷达，可以获得所有车道的全局实时数据，以及每辆车的精确位置和矢量化数据。然而，AI摄像头和交通毫米波雷达也有各自的缺陷。例如，摄像头在恶劣环境下可能会出现误报或漏报，而毫米波雷达虽然可以在恶劣环境下使用，但无法看到清晰的图像，无法识别车辆的车牌、型号、标志和车身颜色。因此，摄像头与雷达的融合，优势互补，雷视依托各自优势的融合产品，成为过去一年交通感知解决方案中的黑马挑战者。其中，代表派别是宇视科技、海康威视、大华等视频物联网企业。他们原本擅长视频技术，在ToG交通领域深耕多年。近年来，他们相继转型。他们开始以视频为核心，融合雷达、大数据、人工智能等技术，在交通领域提供整体场景解决方案。计划。例如，宇视科技今年打出了“雷视融合”的口号，发布了雷视一体机产品及相关解决方案。宇视科技雷视产品线总监刘胜宁告诉新知家，在视频AI方面，最先落地的是交通路边领域。例如，在城市交通管理中，基于卡口和电子警察的非现场执法系统有效地减少了违法驾驶行为，并用于出入口、路边停车、停车位反向搜索和引导等静态交通管理，视频AI基础有效提升了服务效率。“交通强国战略和‘十四五’规划强调，在交通基础设施建设的基础上，进一步提高交通信息化、智能化水平，围绕有序、高效、畅通三要素构建全方位交通网络。和安全，建设足够密度的全天候、高精度、多维度的路侧传感设备成为建设的关键要素，尤其是雷达与视频的融合，越来越多地应用于智慧交通领域过去一年的路边。”另一派是速腾聚创、Ouster万集科技、万集科技等车规级激光雷达供应商，正以雷达传感器为刀，切入智能驾驶、智能交通等细分市场。速腾聚创告诉新知家，随着行业对高精度感知的需求越来越高，激光雷达在智慧交通领域的应用规模也在加速扩大。速腾聚创于2018年率先开始提供激光雷达和摄像头融合产品，目前其Levision融合路端项目已落地广州、深圳、浙江等省市道路。此外，百度、西迪智驾、华为等智能驾驶企业也推出了乐视融合解决方案。当然，早早瞄准智慧城市的腾讯和阿里巴巴也没有缺席。可以这样概括。目前，以雷视的整合为指针，在智慧交通战场打磨产品或解决方案的力量主要有五家，分别是视频物联网企业、路边毫米波雷达供应商、智能驾驶相关企业、车规企业.水平激光雷达供应商和互联网公司。他们有的深耕交通领域，有的擅长雷达传感器，有的从汽车领域一路横切杀出重围。各有各的底牌，不同门派的算命术也各有千秋，大招当然也各有侧重。BrianArthur在他的《技术的本质》一书中提到，技术（所有技术）是某种组合，这意味着任何特定的技术都是由当前的部分、集成或系统组件构建或组合而成的。同时，技术的每个组成部分本身就是一种微型技术。简单来说，新技术是现有技术的结合产生的，是现有技术的演进——而所谓的“雷视融合”，需要做好雷达和视频的融合。其中雷达有毫米波雷达，也有激光雷达。毫米波雷达主要利用波长为毫米波的电磁波来探测和识别目标。目标反射的电磁波可以通过公式计算得到被探测目标相对于雷达位置的距离和相对速度。目前大部分毫米波雷达输出的信息都是点云，是没有高度的二维信息，摄像头获取的图像也是二维信息。为实现毫米波雷达与视频的融合检测，需要对两个坐标空间进行变换，如将毫米波雷达点云从雷达坐标系转换为摄像头采集的图像坐标系。这就需要融合两者的底层数据。一方面可以达到更好的检测精度，另一方面也可以保证关键数据的时间一致性。刘胜宁表示，前端融合和集成传递将是Lesions融合的主要形式，例如：在特征层，可以利用雷达为视频提供更准确的特征区域信息，也可以利用视频识别来补偿雷达的多径效应；数据层利用大量数据和基于场景的算法，同时进行雷达和视频AI模型训练，满足不同业务需求。激光雷达扫描外部环境，利用点云构建三维空间地图。据速腾介绍，在传感器硬件层面，激光雷达与摄像头融合主要是进行时空标定，即激光雷达3D点云与摄像头2D彩色图像的空间匹配和时间同步。“车端和路端都是如此，主要区别在于部署位置和数量。同时，路端与车端相比，还具有多基站融合，即，某段路段多个基站的感知结果，必须进行分析融合。主要技术路线不同，导致乐视一体机在不同公司的实际应用效果存在差异。例如，烟台市从2020年开始就与华为、百度、柯达合作，进行了全息路口/智慧路口应用测试，并对比了3家公司乐视融合解决方案的实际应用情况。据介绍，在华为的全息路口，通过雷达数据和视频数据的融合，初步可以实现对道路交通全要素的高精度实时采集，真实还原行人、自行车和车辆的行驶轨迹.助力交通事故快速解决和赔付，通过AI算法精准判断行车轨迹，自动识别并预警事故，减少二次事故和拥堵的发生，配合智慧灯控后台系统，实现信号控制的优化……这些都是华为全息路口可以实现的功能。另一个例子是柯达的智能十字路口。从功能上看，着重于两个方面的应用：一是多种视频融合方法的呈现。比如柯达会提供高点视频和地面视频的融合，实现高点屏。二是强调利用实时车辆位置信息在交通信号控制中产生价值。例如，科达将车辆的实时位置导入交通仿真，对路网运行进行短期预测，从而优化交通信号方案。烟台市公安局交警支队科技科副科长孙振兴表示，总体而言，华为全息路口采集数据量足，强调轨迹热图在交通安全中的应用；数据融合应用；柯达更喜欢可视化和实时信号优化。底牌不同，其实客户关注的指标也不同。“价格、检测精度、施工难易程度都是用户关注的指标，但不同客户根据实际应用场景，关注点不同，不能一概而论。”速腾聚创以新知家为例，有的客户也会关注解决方案的功能性，有的会更关注感知信息的完整性，有的会更关注感知信息的应用能力。界限模糊：斗争由来已久很多时候，为了生存，如今战场的界限早已模糊不清。在智慧城市的大趋势下，视频物联网企业跨界进入智能驾驶领域，智能驾驶企业进入交通赛道。然而，家大业大的互联网公司，正在各个细分、关联的领域四通八达。早就熟悉了。例如，海康威视的汽车电子业务专注于智能驾驶领域，其路径是以视频传感器为基础，结合雷达、AI、感知数据分析处理等技术，力图成为汽车安全与智能中心基于视频技术。化工产品供应商。对此，早在2016年年中，海康威视就成立了海康威视汽车科技，并于当年10月迅速展示行车记录仪、智能后视镜、车载监控摄像头及相关配件。此外，海康威视还投资同方威视，于2017年年中成立海康威视汽车软件，并于2018年初推出高级驾驶辅助系统和自动泊车APA+。值得注意的是，海康威视还投资了由雷达专家秦毅创立的毫米波雷达公司Senstech，目前是红旗、一汽、现代等车企的供应商。此外，海康在雷达传感器方面的研发项目也在紧锣密鼓地进行中，这一点非常重要。今年3月，海康威视在石家庄开工建设总投资8.5亿元的科技园项目。根据规划，海康威视将在科技园建设20余个专业毫米波和激光雷达实验室，预计生产和科研设备投资2.4亿元，研发50余个高品质雷达产品，涵盖无人驾驶、车辆安全、智能交通等领域。据了解，项目投产后，海康威视石家庄科技园将成为国内规模最大、产品市场占有率最高的商用雷达研发生产基地之一。从成绩来看，海康威视进步神速。数据显示，2020年，海康威视基于视觉与超声波雷达融合的全自动泊车产品，获得了多家车企的新项目委托。2020年，海康威视汽车电子客户包括上汽、吉利汽车、长安汽车、长城汽车等，全年累计新增量产项目50余个，新项目60余个，涉及车型40余款。事实上，由于云端与终端系统的融合，交通大数据与物联网应用的整体融合，以及以视频技术为核心的感知解决方案的推出，视频物联网企业充满了对智能驾驶领域充满信心的，除了海外康，还有大华、商汤、欧比中广、虹软、旷视科技、格灵神通、陆深石等一系列玩家。他们纷纷聚集在智能驾驶领域。从车内到车外，从零部件到整车，从硬件到软件，无不涉足，各有所长。攻城追击之势。比如从大华孵化出来的零跑汽车，此前已经推出了3款量产车型。根据零跑汽车官方数据，截至2021年8月31日，零跑汽车2021年累计订单量已达35662台。同时，据外媒报道，零跑汽车目前正筹划赴港IPO，筹资至少10亿美元。你探我巢穴，我取你窟窿，触犯各自的边界，这将成为这些企业未来很多年的常态。渡大江大河，云诡波涛，群英荟萃，当各方人物在同一个路口相遇，便是风云战场。同场竞技，众人挥刀开路，队伍才刚刚出村。究竟是百家争鸣，还是几个英雄争锋，尚不得而知。当然，最先受益的是整个车路协同领域的发展。毕竟，“智能汽车”+“智慧道路”的协同构成了车路协同最基础的课题，而Levision集成了路侧感知系统，可以支持车路协同和自动驾驶的高速应用。同时，实现相互合作。速腾聚创对新知家表示，在大量丰富准确的实时信息支持下，单车智能与路边智能协同，智慧交通将能够实现从单车智能到智能网联的全球跨越。迈向“智能汽车”+“智慧道路”的整体智能网联交通理念。这从近两年地方政府招投标项目要求的变化就可以看出。例如，今年7月濮阳市政府采购中心发布的智慧交通项目交通信号控制系统项目，不仅采购126台网络自适应信号机，还将采购120台乐视一体机。从对一体机的要求来看，项目明确要求产品以雷达监控为主，视频为辅，像素不低于400万像素，不少于1500行，使雷达目标位置和速度信息可以与视频图像叠加进行比较。在功能上，需要实现对车流量、车道速度、车头时距、车头时距、车道时间占用率、车道空间占用率、排队长度、交通状况和车辆类型的感知和统计，并识别顺畅，缓慢和拥挤的交通状况。一个具体的应用实例是“绿色波段”。所谓绿波带，是指通过计算车辆通过某一路段的时间，协调各路口的红绿灯信号，使车辆在行驶过程中一路连续获得绿灯的技术，这就要求交通后台系统掌握近期道路上机动车交通情况的变化，以及实时的车辆交通数据。大华智能交通算法总工程师梅宇曾告诉雷锋网，优化双向绿波的痛点之一是难以确定队列的长度，队列会阻碍车辆在绿波带。如果不考虑队列的影响，绿波会失败。“绿头协调、绿中协调、绿尾协调，常说是对排队问题的经验处理。”可以远距离采集车流量、排队长度、车头时距等交通信息的是雷视。整合产品最大的特点和优势。“目前的车路协同技术，需要路侧提供一定范围内的交通信息，方便车辆或驾驶员提前做出决策。Lesion融合解决方案可以为车辆提供全天候、高精度、超高速的交通信息。”地平线、车道级的路况信息，有效提升行车安全和行车效率，即使是单车智能自动驾驶，在路侧感知系统的加持下也会更加安全。刘胜宁是这么想的。不过，目前来看，玩家在路端融入Levision的道路并不平坦。影响Levision融合的因素主要包括传感器技术水平、产品稳定性和数据采集的准确性等，这些因素目前都需要进一步提升。就像惠尔视总经理蒋荣军之前在接受采访时所说，雷视一体机在进行像素级融合时，雷达数据和视频数据之间会存在同步问题，两者处理数据以不同的方式，会造成两次数据之间有一定的延迟。此外，还存在传感器采集数据的选择和平衡问题。当采集的数据出现问题时，应该选择和相信哪种数据信息方式，这就需要根据实际场景改进数据处理算法。海口市交警支队科技科科长陈东表示，雷达视频检测数据可以替代道路检测仪，但无法替代互联网浮动车数据。如何更好地整合这两种数据仍然是一个问题。此外，一体机如何与路口原有检测设备配套使用，如何进一步降低成本，如何提高静止目标的检测能力，如何降低产品安装调试的复杂度以及后期的运维等都是悬而未决的问题。大战之初，还有大江大河要渡。谁赢谁输？对此，不同派系各有看家本领。刘胜宁指出，以互联网企业为例，他们拥有大量的C端客户入口，基于大数据和云计算的中台和业务层能力相对较强，但其硬件产品和整体解决方案仍需海康威视、大华、宇视在前端数据采集分析、集成计算存储、场景化工程等方面具有强大优势。事实上，在一些城市的交通信号优化服务项目的招标需求中，很多都提到需要借助滴滴、高德、百度、智慧交通管理大脑等平台对交通状况进行监测和预测，从而检测及时了解路况。并解决交通拥堵问题。仍以绿波带为例。百度早在2018年就已经为当地交警提供了浮动车轨迹数据，可以帮助交警搭建实时信号监测和评估平台，进而实现绿波带的优化。另外，就雷达而言，百度和阿里都是速腾聚创的客户。在车路协同激光雷达路侧感知系统领域，速腾聚创等车规级雷达供应商的优势主要体现在其拥有深厚技术积累的高性能激光雷达硬件、点云感知软件以及各部分的优势。国家的。这三个方面的大量应用案例。宇视、大华等企业在路端算法方面积累了深厚的基础。对于绿波优化，这些视频物联网企业早已入局，并长期打磨自己的系统和算法。其实实现路侧感知解决方案的基本功能并不难。真正难的是企业对客户习惯的理解和复杂生态的构建。多年积累的应用场景的算法和文档，不是一蹴而就的。可以倒出来。宜着眼长远。当然，目前雷视融合的系统性解决方案产品还处于试点的持续开发过程中。如何满足更多的智慧交通应用场景，还有待进一步探索。比如上文提到的一体机如何进一步降低成本，有业内人士告诉新知家，设备成本受到产业链和应用规模的影响。一开始还没有规模效应。“随着用户认知度的提升和行业厂商的巨大投入，产品成本可能会很快达到用户的预期。”在乐视一体机的安装部署方面，视频非常成熟，雷达也比较成熟。因此，厂商在设计乐视一体机时，需要重点考虑融合设备的安装调试方便性等因素。综上所述，乐视融合技术在车路协同领域的作用还有很长的路要走。发展到一定阶段，可能会出现多雷达融合、激光融合、视频融合等新型融合技术。不过，正如刘胜宁所说，正如近年来人脸识别技术的成功应用一样，基于ReID的技术极大地提升了公安管理的效率。可预见。”风从清平的尽头开始，不同势力的刀剑此刻正在各个分支的末端碰撞，发出清脆的颤音。
