高级拼接API（Stitcher类）

目标

在本教程中，您将学习如何：

• 使用高级拼接API来提供拼接 cv::Stitcher
• 了解如何使用预配置的拼接器配置来使用不同的相机型号缝合图像。

Code

本教程代码如下所示。您也可以从这里下载。

#include "opencv2/imgcodecs.hpp"
#include "opencv2/highgui.hpp"
#include "opencv2/stitching.hpp"
#include <iostream>
using namespace std;
using namespace cv;
bool try_use_gpu = false;
bool divide_images = false;
Stitcher::Mode mode = Stitcher::PANORAMA;
vector<Mat> imgs;
string result_name = "result.jpg";
void printUsage(char** argv);
int parseCmdArgs(int argc, char** argv);
int main(int argc, char* argv[])
{
    int retval = parseCmdArgs(argc, argv);
    if (retval) return -1;
    Mat pano;
    Ptr<Stitcher> stitcher = Stitcher::create(mode, try_use_gpu);
    Stitcher::Status status = stitcher->stitch(imgs, pano);
    if (status != Stitcher::OK)
    {
        cout << "Can't stitch images, error code = " << int(status) << endl;
        return -1;
    }
    imwrite(result_name, pano);
    cout << "stitching completed successfully\n" << result_name << " saved!";
    return 0;
}
void printUsage(char** argv)
{
    cout <<
         "Images stitcher.\n\n" << "Usage :\n" << argv[0] <<" [Flags] img1 img2 [...imgN]\n\n"
         "Flags:\n"
         "  --d3\n"
         "      internally creates three chunks of each image to increase stitching success"
         "  --try_use_gpu (yes|no)\n"
         "      Try to use GPU. The default value is 'no'. All default values\n"
         "      are for CPU mode.\n"
         "  --mode (panorama|scans)\n"
         "      Determines configuration of stitcher. The default is 'panorama',\n"
         "      mode suitable for creating photo panoramas. Option 'scans' is suitable\n"
         "      for stitching materials under affine transformation, such as scans.\n"
         "  --output <result_img>\n"
         "      The default is 'result.jpg'.\n\n"
         "Example usage :\n" << argv[0] << " --d3 --try_use_gpu yes --mode scans img1.jpg img2.jpg";
}
int parseCmdArgs(int argc, char** argv)
{
    if (argc == 1)
    {
        printUsage(argv);
        return -1;
    }
    for (int i = 1; i < argc; ++i)
    {
        if (string(argv[i]) == "--help" || string(argv[i]) == "/?")
        {
            printUsage(argv);
            return -1;
        }
        else if (string(argv[i]) == "--try_use_gpu")
        {
            if (string(argv[i + 1]) == "no")
                try_use_gpu = false;
            else if (string(argv[i + 1]) == "yes")
                try_use_gpu = true;
            else
            {
                cout << "Bad --try_use_gpu flag value\n";
                return -1;
            }
            i++;
        }
        else if (string(argv[i]) == "--d3")
        {
            divide_images = true;
        }
        else if (string(argv[i]) == "--output")
        {
            result_name = argv[i + 1];
            i++;
        }
        else if (string(argv[i]) == "--mode")
        {
            if (string(argv[i + 1]) == "panorama")
                mode = Stitcher::PANORAMA;
            else if (string(argv[i + 1]) == "scans")
                mode = Stitcher::SCANS;
            else
            {
                cout << "Bad --mode flag value\n";
                return -1;
            }
            i++;
        }
        else
        {
            Mat img = imread(argv[i]);
            if (img.empty())
            {
                cout << "Can't read image '" << argv[i] << "'\n";
                return -1;
            }
            if (divide_images)
            {
                Rect rect(0, 0, img.cols / 2, img.rows);
                imgs.push_back(img(rect).clone());
                rect.x = img.cols / 3;
                imgs.push_back(img(rect).clone());
                rect.x = img.cols / 2;
                imgs.push_back(img(rect).clone());
            }
            else
                imgs.push_back(img);
        }
    }
    return 0;
}

说明

最重要的代码部分是：

Mat pano;
Ptr<Stitcher> stitcher = Stitcher::create(mode, try_use_gpu);
Stitcher::Status status = stitcher->stitch(imgs, pano);
if (status != Stitcher::OK)
{
    cout << "Can't stitch images, error code = " << int(status) << endl;
    return -1;
}

创建了一个新的stitcher实例，并且cv :: Stitcher :: stitch将完成所有的努力。

cv :: Stitcher :: create可以在预定义的配置（参数mode）之一中创建拼接器。有关详细信息，请参阅cv :: Stitcher :: Mode。这些配置将设置多个拼接器属性以在预定义的场景之一中运行。在预定义的配置中创建stitcher之后，您可以通过设置任何stitcher 属性来调整stitcher。

如果你有cuda设备cv :: Stitcher可以配置卸载某些操作到GPU。如果您喜欢此配置设置try_use_gpu为true。OpenCL加速将基于全局OpenCV设置透明地使用，而不管该标志。

Stitching可能会因为几个原因而失败，您应该始终检查一切是否良好，并导致产生的全景图被存储pano。有关可能的错误代码，请参阅cv :: Stitcher ::状态文档。

相机型号

目前有2种相机模型在stitching pipeline中实现。

• 单应性模型预期透视转换中实现图像之间 cv::detail::BestOf2NearestMatchercv::detail::HomographyBasedEstimator cv::detail::BundleAdjusterReproj cv::detail::BundleAdjusterRay
• 仿射模型预期6自由度或4自由度的仿射变换在 cv::detail::AffineBestOf2NearestMatchercv::detail::AffineBasedEstimator cv::detail::BundleAdjusterAffine cv::detail::BundleAdjusterAffinePartial cv::AffineWarper

相机模型对于创建照相机拍摄的照片全景照片非常有用，而基于仿射的模型可用于针对专门设备拍摄的扫描和对象进行拍摄。

试试看

如果您启用构建样品，您可以找到二进制文件build/bin/cpp-example-stitching。这个例子是一个控制台应用程序，运行它没有参数来查看帮助。opencv_extra提供一些样本数据，用于测试所有可用的配置

尝试全景模式运行：

./cpp-example-stitching --mode panorama <path to opencv_extra>/testdata/stitching/boat*

尝试扫描模式运行（数据集从家庭级扫描仪）：

./cpp-example-stitching --mode scans <path to opencv_extra>/testdata/stitching/newspaper*

或（专业书籍扫描仪的数据集）：

./cpp-example-stitching --mode scans <path to opencv_extra>/testdata/stitching/budapest*

注意

上面的示例预计POSIX平台，在Windows上，您必须显式提供所有文件名（例如boat1.jpg boat2.jpg...），因为Windows命令行不支持*扩展。

也可以看看

如果你想学习stitching pipeline内部或者你想详细配置实验看stitching_detailed.cpp在opencv/samples/cpp文件夹中。