我在使用OpenCV计算立体声对的校正时遇到了一些问题:stereoCalibrate返回一个高rms错误,我得到了错误的校正对。我尝试了我的校正程序和opencv提供的stereo_calib.cpp。它们都返回类似的rms错误。另外,我用opencv/sample/cpp中的样本立体对运行了我的程序,我得到了正确校正的图像。所以我相信问题出在我拍摄立体照片的方式上,有可能吗?
我使用HTC Evo 3D(一款3D智能手机)的立体摄像头拍摄棋盘图案。我试图改变用作输入的图片数量和设置,但我得到的最小立体校准rms约为1. 5,校正后的图像完全错误。
有什么“建议”的方法来拍摄一组照片进行校准吗?谢谢,安德里亚
5条答案
按热度按时间ohfgkhjo1#
检查检测到的棋盘图案对(例如
drawChessboardCorners
)。在某些情况下,两幅图像中的点的顺序不同(见图;在顶部图像中,图案从右到左识别,在底部图像中,图案从左到右识别)。如果是这种情况,则点不再彼此对应。这导致stereoCalibrate
中的高平均重投影误差。当使用calibrateCamera
单独检查每个摄像机的图像时,对于本征函数,rms可能同时非常低,因为立体图像中的不同顺序在这里并不重要。我通过检查找到的棋盘图案并删除以不同顺序检测到图案的图像对来解决这个问题。在我的例子中,这将rms从15(只有一个或几个错误的图像对)提高到小于1。在图像对经常损坏或使用更高分辨率的图像(像素更多)的情况下,我猜误差会更高。
另一个解决方案是使用ArUco和ChArUco模式,其中的顺序不应该是模糊的,但是我还没有测试过这种方法。
vybvopom2#
查看这里的常见错误指南,看看你是否犯过这些常见错误中的任何一个。
http://www.cvlibs.net/software/calibration/mistakes.php
此外,在校准立体摄影机时,您可能希望首先单独校准每个摄影机,然后根据其预先估计的摄影机矩阵将其作为立体对进行校准。
另一个替代工具箱,以及cvlibs(上面的链接),在这里:
http://www.vision.caltech.edu/bouguetj/calib_doc/
干杯
1rhkuytd3#
我拍摄了9张12x18角棋盘的校准图片,禁止鱼眼镜头k3=0,并将找到的角细化到子像素位置。在分辨率为640x480时,最小误差约为0.2。我建议在opencv文档中查找cornerSubpix()、TermCritiria和stereocalibrate()的标志。代码如下所示:
rjee0c154#
Hi做了一些更多的研究,在OpenCV Answer上找到了这个帖子。手机似乎在调整固有矩阵,不断改变焦点,我无法进行很好的校准。
wvyml7n55#
在我的例子中,我从两个视频源中提取帧,我认为它们是同步的-然而,它们不是。在修复同步问题后,我的RMSE从超过20像素下降到~1像素。