Неискаженные параметры искажения

Question

Я пытаюсь удалить изображение с помощью OpenCV (через оболочку OpenCVSharp), и у меня возникают проблемы с определением правильного формата для матриц, я имплантирую их с помощью CvFileStorage, как используется в примере удаления, однако я получаю действительно неожиданные результаты.

Из другого программного обеспечения, которым я пользуюсь, я получаю следующие данные (которые должны быть правильными, так как это программное обеспечение не справляется с этими параметрами)

    <sensor id="0" label="RP_OV5647 (3.5976 mm)" type="frame">
      <resolution width="2592" height="1944"/>
      <property name="focal_length" value="3.5975999999999999e+000"/>
      <property name="fixed" value="false"/>
      <calibration type="frame" class="adjusted">
        <resolution width="2592" height="1944"/>
        <fx>2.5667779156627239e+003</fx>
        <fy>2.5654169232963172e+003</fy>
        <cx>1.2933905910821311e+003</cx>
        <cy>9.6694162774618212e+002</cy>
        <skew>2.9824815660771562e+000</skew>
        <k1>9.1041365324307497e-002</k1>
        <k2>-4.0485507081497402e-001</k2>
        <k3>3.3943759073230600e-001</k3>
        <p1>3.4409596859645629e-004</p1>
        <p2>-3.9472652058529605e-005</p2>
      </calibration>
    </sensor>

Я использую следующий код, чтобы не искажать изображения, встроенная матрица в порядке (дает ожидаемый результат при применении без искажений), однако матрица искажений вызывает у меня проблемы, исходя из того, что я понимаю об ожидаемой компоновке (не нашла никакой примеры, но это то, что я собираю из источника OpenCV) матрица 4X1 с k1k2p1p2 должна работать, поэтому у меня есть это в моем файле конфигурации:

<?xml version="1.0"?>
<opencv_storage>
   <intrinsic type_id="opencv-matrix">
   <rows>3</rows>
   <cols>3</cols>
   <dt>f</dt>
   <data>
      1293.3905910821311 0. 966.94162774618212 0. 2566.7779156627239 2565.4169232963172 0. 0. 1.
   </data>
 </intrinsic>
 <distortion type_id="opencv-matrix">
   <rows>1</rows>
   <cols>5</cols>
   <dt>f</dt>
   <data>
  0.091041365324307497 -0.40485507081497402 0.00034409596859645629 -0.000039472652058529605 0.33943759073230600
   </data>
 </distortion>

Код:

            using (IplImage srcImg = new IplImage(img.Path, LoadMode.Color))
            using (IplImage dstImg = srcImg.Clone())
            {
                CvMat intrinsic, distortion;
                using (CvFileStorage fs = new CvFileStorage("camera.xml", null, FileStorageMode.Read))
                {
                    CvFileNode param = fs.GetFileNodeByName(null, "intrinsic");
                    intrinsic = fs.Read<CvMat>(param);
                    param = fs.GetFileNodeByName(null, "distortion");
                    distortion = fs.Read<CvMat>(param);
                }
                Cv.Undistort2(srcImg, dstImg, intrinsic, distortion);
                dstImg.SaveImage(new System.IO.FileInfo(img.Path).Name);
            }

Однако я получаю полностью искаженные изображения (Whirlpool), у меня неправильный порядок матрицы? существует ли какой-либо пример кода (я не смог его найти) с матрицей, построенной из именованных параметров (все, что я нашел, это образец с использованием файла образца с матрицей в нем и без документации по порядку компонентов)?

Answer 1

Не уверен насчет skew параметр, но этот код дает мне совершенно другие результаты, чем предоставленное вами изображение (но оно также не равно вашему "правильному" исправленному изображению)

int main()
{
    // camera resolution
    cv::Mat input= cv::imread("../inputData/distorted1.jpg");


    cv::Mat distCoeff;
    distCoeff = cv::Mat::zeros(8,1,CV_64FC1);

    // indices: k1, k2, p1, p2, k3, k4, k5, k6 
    // your coefficients here!
    double k1 = 9.1041365324307497e-002;
    double k2 = -4.0485507081497402e-001;
    double p1 = 3.4409596859645629e-004;
    double p2 = -3.9472652058529605e-005;
    double k3 = 3.3943759073230600e-001;
    double k4 = 0;
    double k5 = 0;
    double k6 = 0;

    distCoeff.at<double>(0,0) = k1;
    distCoeff.at<double>(1,0) = k2;
    distCoeff.at<double>(2,0) = p1;
    distCoeff.at<double>(3,0) = p2;
    distCoeff.at<double>(4,0) = k3;
    distCoeff.at<double>(5,0) = k4;
    distCoeff.at<double>(6,0) = k5;
    distCoeff.at<double>(7,0) = k6;


    // camera intrinsics
    cv::Mat cam1;
    cam1 = cv::Mat::eye(3,3,CV_32FC1);
    cam1.at<float>(0,0) = 2.5667779156627239e+003;
    //cam1.at<float>(0,1) = 0;
    cam1.at<float>(0,1) = 2.9824815660771562e+000; // skew?
    cam1.at<float>(0,2) = 1.2933905910821311e+003;

    cam1.at<float>(1,0) = 0;
    cam1.at<float>(1,1) = 2.5654169232963172e+003;
    cam1.at<float>(1,2) = 9.6694162774618212e+002;

    // direct undistort:
    cv::Mat output;
    cv::undistort(input, output, cam1,distCoeff);


    cv::imshow("input", input);
    cv::imshow("distCorr-direct", output);

    cv::waitKey(-1);

    return 0;
}

Answer 2

Так как вы получаете калибровку для пяти параметров k1, k2, k3, p1, p2 тогда вы должны использовать их все для искажения. В настоящее время вы пропускаете k3,

Попробуйте добавить значение k3 в ваш файл конфигурации, чтобы сделать distortion параметр имеет размеры 1x5, Обратите внимание, что порядок должен быть k1, k2, p1, p2, k3,