专利汇可以提供一种基于双球幕相机的视觉定位方法及系统专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种基于双球幕相机的视觉 定位 方法及系统,该方案基于上下两个球幕相机输出的同步全景 视频流 ,可以解决特征点少易 跟踪 失败的问题,从而帮助实现稳定的视觉slam跟踪,另外基于上下两个全景视频流,通过三 角 测量原理,恢复场景深度信息,根据 双目视觉 SLAM原理,计算双球幕相机的相机 位姿 ,最后通过评估关键 帧 的位姿以及 深度图 信息,得到精确的场景地图信息,此方案弥补了现今被动式恢复场景深度不准确不完整的不足,非常适合于车辆和 机器人 定位、障碍物检测和自由空间估计。,下面是一种基于双球幕相机的视觉定位方法及系统专利的具体信息内容。
1.一种基于双球幕相机的视觉定位方法,其特征在于,所述方法包括:
对双球幕相机进行标定,获取上下球幕相机的内外参;
通过双球幕相机采集视频流数据;
基于采集到的所述视频流数据,进行特征点跟踪;
基于三角测量原理,恢复场景深度信息;
根据双目视觉SLAM的原理,计算双球幕相机的相机位姿;
通过评估关键帧的位姿以及深度图信息,得到精确的场景的地图信息。
2.如权利要求1所述的方法,其特征在于,所述的上下球幕相机的内外参,包括上下球幕相机的内参数矩阵和外参数矩阵,利用这两个矩阵,获得世界坐标系到球幕相机坐标系的转换和球幕相机坐标系到图像坐标系的映射关系。
3.如权利要求1所述的方法,其特征在于,基于采集到的所述视频流数据,进行特征点跟踪,包括:
计算上下相机的特征点和描述子;
将连续跟踪K帧的特征点确定为稳定特征点;
在当前帧的稳定特征点超过阈值时,确定为稳定跟踪。
4.如权利要求1所述的方法,其特征在于,基于三角测量原理,恢复场景深度信息,包括:
恢复场景下的视差图;
基于所述视差图以及三角测量原理恢复场景深度信息。
5.如权利要求1所述的方法,其特征在于,通过评估关键帧的位姿以及深度图信息,得到精确的场景的地图信息,包括:
创建关键帧,并对关键帧的位姿进行初始化,从所有三维点中创建初始化地图;
对跟踪过程进行优化,并进行闭环检测和全局BA;
在跟踪过程中进行关键帧插入,得到精确的场景的地图信息。
6.如权利要求5所述的方法,其特征在于,对跟踪过程进行优化,并进行闭环检测和全局BA,包括:
所述全局BA采用光束优化法,优化在跟踪过程中相机的位姿,优化本地窗口的关键帧和局部地图的特征点,并且在回环检测之后优化所有的关键帧和特征点;
所述闭环检测,即在检测一个回环信息时,根据所述回环信息的回环纠正以及优化位姿图,对双目相机的深度信息以及尺度信息进行观测,基于所述回环信息,再次触发全局BA优化当前地图直至得到该场景精确的地图信息。
7.一种基于双球幕相机的视觉定位系统,其特征在于,所述系统包括:
数据采集模块,用于对双球幕相机进行标定,获取上下球幕相机的内内外参,通过双球幕相机采集视频流数据;
数据传输模块,搭建一个网络环境,连接双球幕相机和移动端,移动端直接获取双球幕视频流。双球幕相机内芯片处理拼接过程,将拼接后的视频流实时传回移动端。
图像处理模块,用于基于采集到的所述视频流数据,进行特征点跟踪;基于三角测量原理,恢复场景深度信息;
定位与地图特征构建模块,根据双目视觉SLAM的原理,计算双球幕相机的相机位姿;通过评估关键帧的位姿以及深度图信息,得到精确的场景的地图信息。
8.如权利要求7所述的系统,其特征在于,所述数据传输模块,所涉及的移动端,具体用于实际场景计算中,实时计算相机位姿。
9.如权利要求7所述的系统,其特征在于,所述图像处理模块,具体用于计算上下相机的特征点和描述子;在确定为稳定跟踪之后,恢复场景下的视差图,最终恢复场景深度信息。
标题 | 发布/更新时间 | 阅读量 |
---|---|---|
一种机器人视觉伺服系统的联合自动标定方法及装置 | 2020-05-14 | 912 |
面向大规模SLAM的多传感器融合与数据管理机制 | 2020-05-20 | 638 |
一种胃肠结构的真实尺度三维重建及可视化方法 | 2020-05-23 | 998 |
一种非对称下肢外骨骼机器人及控制方法 | 2020-05-12 | 948 |
一种用于义齿性能测试的仿生咀嚼机器人及使用方法 | 2020-05-15 | 729 |
一种并联轮足式机器人腿结构及移动机器人 | 2020-05-11 | 411 |
一种缺陷修复机器人抓取非静止导线的方法及系统 | 2020-05-18 | 193 |
一种基于双球幕相机的视觉定位方法及系统 | 2020-05-22 | 632 |
一种切削加工机器人的动态误差补偿与控制方法 | 2020-05-11 | 25 |
检测动作的方法和系统 | 2020-05-11 | 144 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。