基于MATLAB的单线激光雷达与可见光相机联合标定系统
项目介绍
本项目实现了一个针对单线激光雷达(2D LiDAR)与单目可见光相机的高精度外参联合标定系统。该系统基于点-面约束(Plane-based Calibration)原理,旨在求解两个异构传感器坐标系之间的刚体变换矩阵(旋转矩阵 $R$ 与平移向量 $T$)。
为了便于算法验证与演示,当前的实现代码包含了一个完整的数据模拟模块,能够自动生成带有高斯噪声的虚拟标定板数据和激光点云数据,从而在无需实际采集硬件数据的情况下验证标定算法的收敛性与准确性。
主要功能特性
- 全流程数据模拟:内置仿真引擎,可生成相机内参、真实外参(Ground Truth)、多位姿标定板参数以及对应的带噪声激光点云数据。
- 非线性优化求解:采用Levenberg-Marquardt(LM)算法进行非线性最小二乘优化,通过最小化几何重投影误差来精确估计外参。
- 鲁棒的数学表示:使用罗德里格斯公式(Rodrigues' Rotation Formula)在旋转矩阵与旋转向量之间进行转换,有效避免万向节死锁问题并减少优化变量。
- 精度评估:能够计算并输出标定结果与真实值(Ground Truth)之间的Frobenius范数误差和平移向量的欧氏距离误差。
- 可视化验证:提供双视图可视化结果,包含3D空间内的传感器与标定板位置关系,以及激光点云重投影到图像平面的效果对比。
系统要求
- MATLAB R2018b 或更高版本
- Optimization Toolbox(优化工具箱,用于调用
lsqnonlin 函数)
核心算法与实现逻辑
本项目的主程序 main.m 并不依赖外部文件输入,而是通过数学建模模拟了完整的物理世界标定过程。其核心处理流程如下:
1. 系统参数配置与真值设定
程序首先以代码硬编码的形式定义了系统的基础参数:
- 相机内参 (K):模拟了一个焦距为1200像素、主点位于图像中心的针孔相机模型。
- 外参真值 (Ground Truth):设定了一个典型的LiDAR与相机的相对位姿(例如LiDAR相对于相机有90度的旋转和特定的平移),作为后续评估标定精度的基准。
2. 数据模拟与特征生成
程序调用
generate_synthetic_data 函数模拟实际标定过程:
- 生成多个(默认为8个)随机各异的标定板位姿,模拟标定板在相机视野前方的不同距离和角度。
- 根据平面方程,计算这些标定板参数在相机坐标系下的法向量和距离。
- 利用真值外参将相机坐标系下的平面逆变换到LiDAR坐标系,计算激光扫描线(z=0平面)与标定板平面的交线,并生成离散的激光点。
- 噪声注入:为了模拟真实传感器的测量误差,对生成的激光点云数据添加了高斯噪声(约2cm幅值)。
3. 外参初始化
在开始优化前,程序构建了一个带有明显偏差的初始猜测值:
- 提供一个并不准确的初始旋转(欧拉角)和平移向量(零向量)。
- 将初始旋转矩阵转换为旋转向量,构建状态变量 $x$(包含3个旋转分量和3个平移分量)。
4. 构建目标函数与迭代优化
这是系统的核心部分,利用
lsqnonlin 函数求解非线性最小二乘问题:
- 代价函数:定义了
calibration_cost_function。其物理含义是:在给定的外参估计下,将LiDAR坐标系下的点变换到相机坐标系后,这些点应当尽可能地贴合标定板所在的空间平面。 - 残差计算:对于每一个LiDAR点,计算其变换后到对应标定板平面的正交距离,所有点的距离残差构成优化目标。
- 求解器:配置Levenberg-Marquardt算法,设置收敛容差和最大迭代次数,迭代更新外参变量直至残差收敛。
5. 结果分析与可视化
优化完成后,程序执行以下后处理:
- 参数恢复:将优化得到的旋转向量还原为旋转矩阵。
- 误差计算:对比标定结果与真值,输出旋转矩阵误差(Frobenius范数)和平移误差(米)。
- 可视化绘图:
*
3D视图:在三维空间中绘制相机原点、计算出的LiDAR位姿、标定板平面法向量以及变换后的点云。
*
2D重投影:利用相机内参,将LiDAR点云投影到像素平面。图中同时绘制“标定结果投影”和“真值投影”,通过两者的重合程度直观展示标定效果。
关键辅助函数解析
calibration_cost_function
代价函数计算模块。该函数接收当前的优化变量(旋转向量和平移向量)以及所有观测数据。它遍历每一个位姿下的所有激光点,利用公式 $P_{cam} = R cdot P_{lidar} + T$ 将点变换至相机系,然后利用点面距离公式 $Error = n^T cdot P_{cam} - d$ 计算几何误差。
generate_synthetic_data
合成数据生成器。该函数负责构建虚拟场景。它首先在相机坐标系中随机生成合法的平面参数(法向量和截距),然后利用逆向几何变换求解这些平面在LiDAR坐标系下的直线方程,并在这些直线上离散化采样生成带有随机噪声的3D点(z=0)。
rotationMatrixToVector / rotationVectorToMatrix
罗德里格斯公式实现。这两个函数实现了$3 times 3$旋转矩阵与$3 times 1$旋转向量之间的相互转换。在优化过程中使用旋转向量可以保证旋转矩阵的正交性约束,并将独立变量数量限制在最小的3个自由度。
使用方法
由于代码已包含数据模拟模块,无需通过命令行加载外部数据。
- 打开 MATLAB。
- 将当前工作目录切换通过代码所在文件夹。
- 直接运行
main 函数或在编辑器中按 F5 执行。 - 观察命令窗口输出的迭代过程和最终误差报告。
- 查看弹出的可视化窗口,评估点云与标定板的贴合程度及重投影效果。