Странные линии на подаче камеры с Opencv + Irrlicht на текстурном отображении

Я пытался наложить текстурную карту 3d-модели Irrlicht с помощью камеры Opencv для проекта дополненной реальности, я использую irrlicht 1.8.1 и opencv 2.4.9, и я почти закончил textureMapping, но проблема в том, что в Подача камеры и ее скорость ниже 4 кадров в секунду, и вывод будет выглядеть, как на этом скриншоте (ниже):

У меня есть следующий код, который делает это:

 #include <irrlicht.h>
 #include "driverChoice.h"
 #include <opencv/cv.h>
 #include <opencv/cxcore.h>
 #include <opencv/highgui.h>
 #include <time.h>
 #include <sys/timeb.h> 
 #include <opencv2\highgui\highgui.hpp>
 #include <IGUIEnvironment.h>

 using namespace cv;
 using namespace irr;
 using namespace core;
 using namespace scene;
 using namespace video;
 using namespace io;
 using namespace gui;

 #ifdef _MSC_VER
 #pragma comment(lib, "Irrlicht.lib")
 #endif

 #ifdef _IRR_WINDOWS_
 #pragma comment(lib, "Irrlicht.lib")
 #pragma comment(linker, "/subsystem:windows /ENTRY:mainCRTStartup")
 #endif


 int main()
 {
 IrrlichtDevice *device = createDevice(video::EDT_OPENGL, dimension2d<s32>     (640 , 480), 16, false, true /* shadow */, false);
if (!device)
    return 1;
device->setWindowCaption(L"Hello World! - Irrlicht Engine Demo");
IVideoDriver* driver = device->getVideoDriver();
ISceneManager* smgr = device->getSceneManager();
IGUIEnvironment* guienv = device->getGUIEnvironment();
ITexture* frame_tex = driver->addTexture(vector2d<s32>(640, 480), "video_stream");
guienv->addStaticText(L"Hello World! This is the Irrlicht Software renderer!",
    rect<s32>(10,10,260,22), true);
IAnimatedMesh* mesh = smgr->getMesh("E:/Akshay/VS2012Projects/IrrlichtDemoApp/IrrlichtDemoApp/ratamahatta.md2");
if (!mesh)
{
    device->drop();
    return 1;
}
IAnimatedMeshSceneNode* node = smgr->addAnimatedMeshSceneNode( mesh );
if (node)
{
    node->setMaterialFlag(EMF_LIGHTING, false);
    node->setMD2Animation(scene::EMAT_STAND);
    node->setMaterialTexture( 0, driver->getTexture("E:/Akshay/VS2012Projects/IrrlichtDemoApp/IrrlichtDemoApp/ctf_r.png") );
}   
smgr->addCameraSceneNode(0, vector3df(20,30,-50), vector3df(0,5,0));
while(device->run())
{
VideoCapture capture(0);
Mat camera_frame;


if( cv::waitKey(50) >= 0 ) break;
if( !capture.grab() )
{
    std::cout << "Unable to grab camera frame\n";
}
capture >> camera_frame;

if( ! camera_frame.empty() )
{
    //exception here
    unsigned char *tex_buf = (unsigned char*)frame_tex->lock();
    unsigned char *frame_buf = camera_frame.data;
    // Convert from RGB to RGBA
    for(int y=0; y < camera_frame.rows; y++) {
        for(int x=0; x < camera_frame.cols; x++) {
            *(tex_buf++) = *(frame_buf++);
            *(tex_buf++) = *(frame_buf++);
            *(tex_buf++) = *(frame_buf++);
            *(tex_buf++) = 255;
        }
    }
    frame_tex->unlock();

    driver->beginScene(true, true, SColor(255,100,101,140));

    driver->draw2DImage(frame_tex, core::rect<s32>(0,0,640,480),
        core::rect<s32>(0,0,480,640));

    smgr->drawAll();
    guienv->drawAll();

    driver->endScene();
}
}

device->drop();
}

Любая помощь будет принята с благодарностью!

Заранее спасибо!

1 ответ

Решение

Я решил проблему, проблема была с моим ноутбуком, я попытался сделать это на другом компьютере, и он работает нормально. Это из-за s32, я изменил его на u32, и теперь он работает нормально. спасибо всем за помощь!

Другие вопросы по тегам