opencv - 重建立体图像

Question

我有两个立体声 imgs 源和参考。我找到了基本矩阵，现在我必须用 src img 中的对应点重建 ref img（几何相似），沿着 ref img 中该点的核线搜索。就像我必须为 ref img 中的一个点提取一个补丁并将这个补丁与沿极线的其他图像中的补丁进行比较。我会沿着极线挑选最佳匹配的补丁并将其放置在 pt 的 x 位置。以这种方式我得到重建的img。你能告诉我如何为补丁选择最佳匹配吗？比如标准是什么以及如何选择补丁大小。

标签： opencvcomputer-vision

Answer 1

选择最佳补丁大小是您自己选择的超参数，它基于实验。但是，选择沿核线的最佳匹配与进行视差匹配完全相同。只需沿着与参考补丁的平方差之和最小的线找到补丁。

然而，为了使事情更容易，核线用于立体校正，其中扫描线以搜索相应的补丁，因此对补丁的搜索是水平完成的。cv2.stereoRectify结合使用应该cv2.remap可以帮助您做到这一点。查看OpenCV stereoRectify distorts image以获得灵感。