OpenCV 2.2 SURF 特征匹配问题

Question

我修改了 OpenCV 演示应用程序“matching_to_many_images.cpp”来查询图像（左）到来自网络摄像头的帧（右）。第一张图片的右上角出了什么问题？

我们认为这与我们遇到的另一个问题有关。我们从一个空数据库开始，只添加唯一的（与数据库中的功能不匹配的功能），但仅添加三个功能后，我们就得到了所有新功能的匹配......

我们正在使用： SurfFeatureDetector surfFeatureDetector(400,3,4); SurfDescriptorExtractor surfDescriptorExtractor; FlannBasedMatcher flannDescriptorMatcher；

完整的代码可以在以下位置找到：http://www.copypastecode.com/71973/

Answer 1

我认为这与边界关键点有关。检测器检测关键点，但为了让 SURF 描述符返回一致的值，它需要其周围像素块中的像素数据，这在边界像素中不可用。您可以使用以下代码片段在检测到关键点之后但在计算描述符之前删除边界点。我建议使用 20 或更大的 borderSize。

removeBorderKeypoints( vector<cv::KeyPoint>& keypoints, const cv::Size imageSize, const boost::int32_t borderSize )
{
    if( borderSize > 0)
    {
        keypoints.erase( remove_if(keypoints.begin(), keypoints.end(),
                               RoiPredicatePic((float)borderSize, (float)borderSize,
                                            (float)(imageSize.width - borderSize),
                                            (float)(imageSize.height - borderSize))),
                     keypoints.end() );
    }
}

其中 RoiPredicatePic 实现为：

struct RoiPredicatePic
{
    RoiPredicatePic(float _minX, float _minY, float _maxX, float _maxY)
    : minX(_minX), minY(_minY), maxX(_maxX), maxY(_maxY)
    {}

    bool operator()( const cv::KeyPoint& keyPt) const
    {
        cv::Point2f pt = keyPt.pt;
        return (pt.x < minX) || (pt.x >= maxX) || (pt.y < minY) || (pt.y >= maxY);
    }

    float minX, minY, maxX, maxY;
};

此外，近似最近邻索引并不是匹配图像对之间特征的最佳方法。我建议您尝试其他更简单的匹配器。

Answer 2

您的方法工作完美，但由于错误地调用了drawMatches 函数，它显示了错误的结果。

您的错误调用是这样的：

drawMatches(image2, image2Keypoints, image1, image1Keypoints, matches, result);

正确的调用应该是：

drawMatches(image1, image1Keypoints, image2, image2Keypoints, matches, result);

Answer 3

我遇到了同样的问题。令人惊讶的是，该解决方案与边界点或 KNN 匹配器无关。只需要一个不同的匹配策略来从大量的匹配中过滤掉“好的匹配”。

使用 2 NN 搜索，并满足以下条件 -

如果距离（第一个匹配）< 0.6*距离（第二场比赛） 第一场比赛是“好比赛”。

过滤掉所有不满足上述条件的匹配，并仅对“好的匹配”调用drawMatches。瞧！