资讯专栏INFORMATION COLUMN

基于光流跟踪和功能匹配(称为LK-ORB-SLAM2)融合的立体视觉气味测量算法

godlong_X / 2584人阅读

摘要:功能检测后是立体声匹配过程。初始化后,使用光流跟踪功能点以获取特征对应。功能点在相机运动期间不断丢失,然后我们建议的匹配帧插入方案将在正确的时间插入匹配帧。流程图功能提取算法特征点的性能对视觉气味学有指数级的影响。

目录

1、如何解决光流跟踪过程中丢失特征点的问题

2、ORB-SLAM2的工作流程:检测功能点、立体声匹配、功能匹配和运动估计

3、LK-ORB-SLAM2的工作流程

4、功能提取算法

5、立体声匹配

 6、光流跟踪


1、如何解决光流跟踪过程中丢失特征点的问题

建议采用自适应匹配帧插入方案,以及时停止光流跟踪,并在正确的时间插入匹配帧并检测新功能点,以保持 LK-ORB-SLAM2 运行

2、ORB-SLAM2的工作流程:检测功能点、立体声匹配、功能匹配和运动估计

首先提取特征点。功能检测后是立体声匹配过程。然后,在前一帧中创建的场景点投影到当前帧中,并与当前帧匹配以获得多个功能对应。最后,可以使用通用的 3D-2D 算法计算运动。

3、LK-ORB-SLAM2的工作流程

当 LK-ORB-SLAM2 加载帧时,它将确定帧是否是第一帧。如果是,LK-ORB-SLAM2 将执行初始化:检测帧中的特征点,然后通过立体声匹配获得一些场景点(立体声匹配的方法将在 Sect. 4.2中描述),第一帧将设置为匹配帧。初始化后,使用光流跟踪功能点以获取特征对应。功能点在相机运动期间不断丢失,然后我们建议的匹配帧插入方案将在正确的时间插入匹配帧。(匹配帧插入方案将在第4.4条中描述)。LK-ORB-SLAM2 将检测匹配帧中的功能点,并执行功能匹配以获取功能对应。当获得足够的函数时,可以使用通用的 PnP 算法[3]计算运动(PnP 算法的原则位于参考 [3]的这一节中:3D 到 2-D:来自三维结构和图像特征对应的运动)。

流程图

4、功能提取算法

特征点的性能对视觉气味学有指数级的影响。根据[17],ORB 比 SIFT 效率高得多, 并加快了强大的功能 (SURF)[27]。ORB 基于加速段测试 (FAST)[28]关键点探测器和二进制强健的独立基本功能 (BRIEF)[29]描述符的功能。

ORB 的缺点是特征点的分布相对集中,这不利于在随后的帧中找到这些点。ORB-SLAM2 将图像分成几个矩形块,并从每个矩形块中多带带提取要点来解决这个问题。LK-ORB-SLAM2 使用此方法优化 ORB。

5、立体声匹配

功能检测后,将使用立体声匹配算法计算场景点的深度。图3说明了立体声匹配的过程,对于左图像中的蓝色特征点,在右图像的同一行中创建带形搜索区域,该区域中的点匹配候选者。对于右图像中的两个匹配候选者,分别计算其简要描述符,然后分别比较描述距离(有关特征描述符和距离比较的更多信息,请参阅文献[3])。距离较小的点是左图中蓝点的匹配点。

 6、光流跟踪

为了解决功能匹配需要太多时间的问题,LK-ORB-SLAM2 使用光流来计算前一帧中的功能点的移动,以便直接在当前帧中查找这些功能点,从而直接获得功能对应。图4显示了光流跟踪的过程,其中发现了两个特征对应。

参考文献:Fast stereo visual odometry based on LK optical flow and ORB-SLAM2

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/122410.html

相关文章

  • 机器视觉、模式识别库汇总

    摘要:十开放模式识别项目开放模式识别项目,致力于开发出一套包含图像处理计算机视觉自然语言处理模式识别机器学习和相关领域算法的函数库。 一、开源生物特征识别库 OpenBROpenBR 是一个用来从照片中识别人脸的工具。还支持推算性别与年龄。使用方法:$ br -algorithm FaceRecognition -compare me.jpg you.jpg二、计算机视觉库 OpenCVOpenC...

    habren 评论0 收藏0
  • 深度学习在计算机视觉领域(图像,视频,3-D点云,深度图)应用一览 计算机视觉图像处理

    摘要:现在这种天然的特征描述机制,给图像预处理提供了不错的工具,它能将图像处理和视觉预处理合二为一。前面运动估计已经用深度学习求解了,现在这两个问题自然也是。和上个问题类似,采用深度图学习做合成图像,也属于空间。 ...

    ztyzz 评论0 收藏0
  • 自动驾驶车辆在结构化场景中基于HD-Map由粗到精语义定位

    摘要:最后,为了使规划模块获得更平滑的姿态,提高定位系统的鲁棒性,采用了带有滑动窗口的姿态图,优化窗口中包含跟踪良好的帧数据,如果滑动窗口的大小超过阈值,历史记录中的一帧将根据车辆状态从滑动窗口中剔除。 点云PCL免费知识星球,点云论文速读。 文章:Coarse-to-fine Semanti...

    Honwhy 评论0 收藏0
  • slam十四讲各章内容概述

    摘要:代表第一章下的代表各章下的小细节内容。描述了李群的局部性质,是单位元附近的正交空间。否则,一个群可能存在多个李代数注意点旋转矩阵的导数,可以由旋转向量指定。误差项是将点的投影位置与观测位置做差,所以称为重投影误差。 1)代表第一章 1)下的1.2代表各章下的小细节内容。层次按1. ——1.1...

    canger 评论0 收藏0
  • 机器视觉产业链全解析

    摘要:在目前的整个机器视觉系统成本构成中,零部件及软件开发占据了的比例,是产业链中绝对的核心环节和价值获取者。光源的好坏在于对比度亮度和对位置变化的敏感程度,机器视觉行业主要采用光源产品。 点击上方小白学视觉,选择加星标或置顶 重磅干货,第一时间送达 机器视觉(Machine Vision...

    testbird 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<