不断刷新纪录 大华股份AI斩获场景流和光流两项国际竞赛第一
继50天内拿下4个世界纪录后,近日,大华股份再次刷新KITTI Sceneflow和KITTI Flow两项竞赛的全球最好成绩,采用基于实例分割、深度视差网络、刚体运动一致性约束的场景流估计算法,超越了其它一流AI公司和顶尖的学术研究机构,以及ICCV、ECCV、CVPR相关论文中的场景流研究成果,这标志着大华股份在场景流与光流两个算法领域均具有重大国际影响力。
大华股份取得
KITTI Sceneflow排行榜第一名
(网址: www.cvlibs.net/datasets/kitti/eval_scene_flow.php)
大华股份取得
KITTI Flow排行榜第一
网址: (www.cvlibs.net/datasets/kitti/eval_scene_flow.php?benchmark=flow)
关于KITTI:
KITTI数据集由德国卡尔斯鲁厄理工学院和丰田美国技术研究院联合创办,是目前国际上最大的计算机视觉算法评测数据集之一。数据集用于评测立体匹配(stereo)、光流(flow)、场景流(sceneflow)、视觉里程计(visual odometry)、物体检测(object detection)和跟踪(tracking)、道路分割(road)、语义分割(semantics)等计算机视觉技术的性能。KITTI包含市区、乡村和高速公路等场景采集的真实图像数据,每张图像中最多包含15辆车和30个行人,且存在不同程度的遮挡与截断。
场景流与光流:
场景流算法能够同时估计场景中物体的三维位置与三维运动矢量,是感知环境空间几何结构的核心算法,与感知语义信息的算法结合后,能够全面地理解环境。三维场景流的估计结果能够进一步分解为立体匹配结果与光流匹配结果,可以认为,光流是场景流映射到二维图像坐标系的投影。
在本次比赛中,大华股份AI团队为提升场景流估计精度,增加了一系列算法模块。首先,基于Mask-RCNN网络进行实例分割,从场景中分割出行人、车辆、自行车等前景目标。接下来,基于GC-Net计算初始视差图,使用分段多权重loss函数、利用实例分割结果和多尺度特征图优化初始视差结果,得到更加精细的视差图,进而改善了初始的proposal NRT集合。最后,引入移动前景目标的刚体运动一致性约束,针对场景流不连续区域,采用多阈值融合的策略,优化场景流估计结果。
在评测中,采用场景流和光流算法的效果和计算结果如下所示:
▲输入图像
▲T0时刻视差图
▲经光流反向映射后的T1时刻视差图
▲T0时刻到T1时刻的光流图
在大华实际产品和未来产品中的应用
本次竞赛中使用的技术已在大华股份的双目摄像机、全景摄像机等产品上得到应用,提升多目摄像机的捕获目标深度数据、目标分离等算法性能。同时,该技术也成功应用于AR融合应用,实现单个与多个摄像机图像的AR语义融合,极大提升行业解决方案的用户体验。
双目摄像机立体匹配应用场景
以下为致密物体堆积下立体匹配的效果:
▲双目图像左图
▲视差图估计结果
AR语义融合应用场景
以下为路面图像的AR语义融合效果,可供增强的信息:目标类别、位置、运动矢量等。
▲真实图像
▲AR语义融合后的效果
关于大华
浙江大华技术股份有限公司,成立于2001年,创业至今,逐步形成以音视频技术为核心,集调度通信、安防监控、智能交通开发和数字大屏显示等于一体的产品格局,并建有研发、科研及现代化产业基地34000平米,另有7万多平米二期产业基地在建,拥有员工近千人,其中研发人员近400人。 2008年5月,公司成功上市(股票代码002236),是目前国内最具技术水平和规模实力的安防视讯产品研发制造商之一。公司销售遍布海内外,产品广泛适用于公安、金融、交通、电力、通信、能源等领域,并相继问鼎三峡水电、奥运场馆、六国峰会等重大工程项目,是我国安防设备的主流供应商。
公司拥有国家级博士后科研工作站,每年近10%销售收入投入研发,研发投入行业第一,已承接3项国家高技术产业化重大专项、3项国家火炬计划项目和1项国家863计划项目,是国家规划布局内重点软件企业、国家火炬计划重点高新技术企业。
“社会的安全,我们的责任”,大华将继续秉承“诚信、敬业、责任、创新”的企业精神,时刻牢记“行业领先,产业报国”的使命,为品质生活的构建,和谐社会的发展而不懈努力。
联系大华
公司网址: www.dahuadp.com
联系电话: 86-0571-28005857
公司邮箱: tx@dahuatech.com
邮政编码: 310053
公司地址: 浙江杭州市滨江区滨安路1187号
免责声明:本文来源于大华,本文仅代表作者个人观点,本站不作任何保证和承诺,若有任何疑问,请与本文作者联系。
最新动态更多
- 美视实力产品出货--500吋大型M工程银幕
- 闪耀一带一路 国画再续世博缘 ——中航国画激光
- 朗恒科技TVO-3H无压缩HDMI视频光端机用于4K拼接
- 5G大机遇下的两化融合发展之路暨两化百人会俱乐
- 传统拼接处理器与分布式拼接处理器的区别
- 顶尖数字艺术家云集 法国梅茨夏季星海艺术文化节
- 【走进深圳】库帕:打造差异化核心竞争优势
- 你知道光端机吗?对它的工作原理熟悉吗?
- 会展 | newline亮相2019北京部委央企及大型企业
- 从“人脸识别”向前一步 AI识别对象不断拓展
- 伦敦将打造LED外壳全沉浸式体验球形建筑
- 开启大屏幕 分享好时光 | 爱普生发布全球首款激
- “从教育工作者,到教育创新者”- 大理市互动教
- 【走进深圳】广景视睿:深化行业应用,赋能新场