【ORB-SLAM3:相机针孔模型和相机K8模型】

server/2024/12/26 23:46:06/

在ORB-SLAM3中,相机的建模是 SLAM 系统的核心之一,因为它直接影响到如何处理和利用图像数据进行定位和地图构建。ORB-SLAM3 支持不同的相机模型,其中包括针孔模型和鱼眼模型(K8 模型)。下面分别介绍这两种模型。

相机针孔模型

针孔模型是计算机视觉中最常用的摄像机模型之一,ORB-SLAM3 也使用它来建模常规的透视相机(Perspective Camera)。

相机针孔模型简介

针孔模型基于理想化的几何假设,将三维点投影到二维图像平面上。它假设:

  • 光线通过一个小孔投影到图像平面上。
  • 图像形成过程可以用简单的线性模型表示。

针孔模型的数学公式

针孔模型的核心是摄像机的投影关系,通过内参矩阵将三维点投影到二维图像上:
在这里插入图片描述
其中:

  • (x,y,z):三维点在相机坐标系下的坐标。
  • (u,v):二维图像坐标。
  • f_x,f_y:焦距(以像素为单位)。
  • c_x,c_y:主点坐标(光心在图像平面上的位置)。
  • K:内参矩阵,定义相机的内在参数。

针孔模型特点

  • 假设图像是中心对称的,光学畸变很小或可以忽略。
  • 简单而有效,适用于常规透视相机。
  • 在 ORB-SLAM3 中用于常规的 RGB 相机(例如,手机摄像头、普通相机)。

相机K8模型(鱼眼模型)

K8 模型是 ORB-SLAM3 用于建模具有鱼眼镜头的广角相机的数学模型。鱼眼相机能够捕获比普通相机更大的视角,但会导致显著的非线性畸变。

鱼眼模型的简介

鱼眼相机的投影模型与针孔模型不同,它考虑到广角镜头会导致的畸变。K8模型采用了更复杂的非线性变换,将三维点投影到图像平面上,同时校正因大视场角导致的畸变。
K8是广义相机模型的扩展,支持最多8个自由度的畸变校正,因此称为K8模型。

K8模型的数学公式

K8模型采用如下步骤将三维点投影到二维图像平面上

  • 将三维点(x,y,z) 归一化为相机坐标系下的方向向量:
    在这里插入图片描述

  • 引入畸变校正,通过径向和切向畸变参数(最多 8 个自由度)对点 p 进行修正:
    在这里插入图片描述
    其中,k1,k2,…,k8是畸变校正参数。

  • 使用内参矩阵将校正后的点映射到图像平面:
    在这里插入图片描述

K8模型特点

  • 适用于鱼眼镜头和其他大视场角的相机。
  • 考虑了复杂的非线性畸变,能够提供更精确的投影和重投影。
  • 支持高自由度的畸变校正(8 个自由度),比传统的针孔模型更通用。

针孔模型与K8模型的对比

在这里插入图片描述

ORB-SLAM3 中的实现与选择

在ORB-SLAM3中,相机模型的选择取决于所使用的相机类型:

  • 如果使用普通透视相机,可以选择针孔模型。
  • 如果使用鱼眼相机或者具有大视场角的相机,则可以选择K8模型。
    ORB-SLAM3在初始化时,根据相机内参配置文件(或标定结果)加载相应的相机模型,同时在跟踪、建图和优化过程中使用这些模型进行位姿估计和误差优化。

总结

  • 针孔模型适用于普通的透视相机,计算简单但不适合广角镜头。
  • K8模型则是为鱼眼相机设计的,可以校正复杂的非线性畸变,适合处理大视场角的图像。
  • 在实际应用中,根据相机类型选择合适的模型,可以提高 ORB-SLAM3 的精度和稳定性。

http://www.ppmy.cn/server/153457.html

相关文章

STM32F407 | Embedded IDE02 - 调试、断点、观察全局变量(支持JLINK、STLINK、DAPLINK)

导言 继续使用安富莱的开发板。 在vscode上实现程序的调试、打断点、观察全局变量确实要折腾一番。有一些开发者跳过了这个功能,使用串口打印log来调试程序。但是,我认为打断点,观察全局变量还是很有效的调试手段,不能放弃。所以&…

本地电脑使用命令行上传文件至远程服务器

将本地文件上传到远程服务器,在本地电脑中cmd使用该命令: scp C:/Users/"你的用户名"/Desktop/environment.yml ws:~/environment.yml 其中,C:/Users/“你的用户名”/Desktop/environment.yml是本地文件的路径, ~/en…

【每日学点鸿蒙知识】私仓搭建、resources创建文件夹、hvigor如何动态设置版本、SM3摘要算法、SP存储报错等

【每日学点鸿蒙知识】私仓搭建、resources创建文件夹、hvigor如何动态设置版本、SM3摘要算法、SP存储报错等 1、OH私仓如何创建? 可以参照以下文档来搭建OH私仓:https://developer.huawei.com/consumer/cn/doc/harmonyos-guides-V5/ide-ohpm-repo-quic…

基于Spring Boot的网络购物商城的设计与实现

目录 摘 要:I Abstract:II 第1章 系统分析1 1.1 系统概述1 1.2 系统可行性分析1 1.2.1 技术可行性分析1 1.2.2 经济可行性分析1 1.2.3 社会可行性分析1 1.3 需求分析2 1.2.1 业务角色分析2 1.2.2 用例分析3 第2章 系统设计4 2.1 功能模块设…

C++ STL vector基本原理和用法

文章目录 基本原理1. 数据存储结构2. 内存管理机制3. 迭代器实现原理4. 元素访问原理5. 插入和删除元素原理 常见用法1. 概述2. 包含头文件3. 定义和初始化4. 常用成员函数5. 迭代器6. 内存管理与性能特点7. 应用场景 基本原理 以下是关于 std::vector 的基本原理讲解&#xf…

全国硕士研究生入学考试(考研)常识详解之复试考试科目:笔试、面试与加试

全国硕士研究生入学考试(考研)常识详解之复试考试科目:笔试、面试与加试 硕士研究生入学考试的复试是对考生进行全面评估的重要环节,旨在考察考生的专业知识、综合素质及科研潜力。复试主要包括笔试与面试两大核心部分&#xff0…

光谱相机的工作原理

光谱相机的工作原理主要基于不同物质对不同波长光的吸收、反射和透射特性存在差异,以下是其具体工作过程: 一、光的收集 目标物体在光源照射下,其表面会对光产生吸收、反射和透射等相互作用。光谱相机的光学系统(如透镜、反射镜…

Linux下的MySQL:表的增删查改

目录 插入 1.全列插入 2.指定列插入 3.多行插入 4.插入否则更新 查询 1.全列查询 2.查询指定列 3.查询表达式 4.对查询的结果去重 5.where条件 结果排序 筛选分页结果 更新 ​删除 删除整表 截断表 插入 创建一张学生表 1.全列插入 、 2.指定列插入 3.多行插…