Не удается отправить форму в phamtomjs

Question

Не удается отправить форму в phamtomjs

Я новичок в PhantomJS. Следуя этому примеру, я попытался создать скрипт, который регистрируется на avito.ru, затем открывает страницу редактирования, изменяет цену, отправляет форму, и, когда сервер возвращает страницу подтверждения, скрипт должен отправить новую форму для изменения происходят.

Поэтому цикл должен быть следующим:

Log in
GET .../items/edit/678347092
POST to .../items/edit/678347092
GET .../stiralnaya_mashina_indesit_nws_7105_l_novaya_678347092/edit/confirm
POST to .../stiralnaya_mashina_indesit_nws_7105_l_novaya_678347092/edit/confirm

Мой код ниже:

var steps=[];
var testindex = 0;
var loadInProgress = false;

/*********SETTINGS*********************/
var webPage = require('webpage');
var page = webPage.create();
page.viewportSize = { width: 1366, height: 768 };
page.settings.userAgent = 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36';
page.settings.javascriptEnabled = true;
phantom.cookiesEnabled = true;
phantom.javascriptEnabled = true;
/*********SETTINGS END*****************/

console.log('All settings loaded, start with execution');
page.onConsoleMessage = function(msg) {
    console.log(msg);
};
/**********DEFINE STEPS THAT FANTOM SHOULD DO***********************/
steps = [

    //Step 1 - Open Avito login page
    function(){
        console.log('Step 1 - opening Avito');
        page.open("https://www.avito.ru/profile/login?next=%2Fprofile", function(status){

            });
    },

    //Step 2 - Populate and submit the login form
    function(){
        console.log('Step 2');
        console.log('URL: ' + page.url);
        console.log('Populate and submit the login form');
        page.evaluate(function(){
                $('input[type="email"]').val('myemail');
            $('input[type="password"]').val('mypassword');
            $('.js-form-login').submit();    
          });
    },
    //Step 3 Profile page
    function(){
        console.log('Step 3');
        console.log('URL: ' + page.url);
        page.render('3-avito.png');
        console.log("Opening edit page");
        page.open("https://www.avito.ru/items/edit/678347092", function(status){

            });
    },


    //Step 4 Edit the price
   function(){
        console.log('Step 4');
        console.log('URL: ' + page.url);
        page.render('4-edit-page.png');
        console.log("Changing the price and submitting the form");
            page.evaluate(function(){
            document.querySelector('#item-edit__price').value = '21999';
            document.forms[0].submit();
        });
        },
  //Step 5 Confirm changes
   function(){
        console.log('Step 5');
        console.log('URL: ' + page.url);
        page.render('5-edit-confirm.png'); 
        console.log("Final confirmation");
        page.evaluate(function(){ 
            document.forms[0].submit();
            });

    },
  //Step 6 Render the result
    function(){
        console.log('Step 6');
        console.log('URL: ' + page.url);
        console.log("Rendering final page");
        page.render('6-result.png'); 
    }
];

/**********END STEPS THAT FANTOM SHOULD DO***********************/

//Execute steps one by one
interval = setInterval(executeRequestsStepByStep,50);

function executeRequestsStepByStep(){
    if (loadInProgress == false && typeof steps[testindex] == "function") {
        steps[testindex]();
        testindex++;
    }
    if (typeof steps[testindex] != "function") {
        console.log("test complete!");
        phantom.exit();
    }
}

/**
 * These listeners are very important in order to phantom work properly. Using these listeners, we control loadInProgress marker which controls, weather a page is fully loaded.
 * Without this, we will get content of the page, even a page is not fully loaded.
 */
page.onLoadStarted = function() {
    loadInProgress = true;
    console.log('Loading started');
};
page.onLoadFinished = function() {
    loadInProgress = false;
    console.log('Loading finished');
};
page.onConsoleMessage = function(msg) {
    console.log(msg);
};

Я попытался вставить код внутри page.evaluate в консоль Chrome, и он работает нормально. Но, как я вижу в Fiddler, этот скрипт не выполняет первый запрос POST (форма не отправляется на шаге 4). Также я рендерил изображения, показывающие, что цена изменяется на шаге 4, но с тех пор все остальные изображения остаются прежними.

Ниже приведен вывод сценария на консоль:

All settings loaded, start with execution
Step 1 - opening Avito
Loading started
Loading finished
Step 2
URL: https://www.avito.ru/profile/login?next=/profile
Populate and submit the login form
Loading started
Loading finished
Step 3
URL: https://www.avito.ru/profile
Opening edit page
Loading started
Loading finished
Step 4
URL: https://www.avito.ru/items/edit/678347092
Changing the price and submitting the form
Step 5
URL: https://www.avito.ru/items/edit/678347092
Final confirmation
Step 6
URL: https://www.avito.ru/items/edit/678347092
Rendering final page
test complete!

Есть идеи, как заставить этот скрипт работать?

Обновление: сценарий иногда не может отправить первую форму входа, иногда вторую форму, и иногда он передает вторую форму вместо третьей на шаге 5, а не на шаге 4.

Я использовал onResourceRequested для просмотра заголовков запросов, и в приведенном ниже примере он не отправляет вторую форму на шаге 4, но отправляет ту же форму на шаге 5. (Так что я думаю, что это не проблема с проверкой формы). Вот некоторые выдержки:

Step 1 Open login page

Request (#1): {"headers":[{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.157 

Safari/537.36"},{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"}],"id":1,"method":"GET","time":"2015-11-

19T12:38:51.111Z","url":"https://www.avito.ru/profile/login?next=%2Fprofile"}

Loading started

...
Loading finished


Step 2
 - POST login and password
Request (#28): {"headers":[{"name":"Origin","value":"https://www.avito.ru"},{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 

(KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36"},{"name":"Content-Type","value":"multipart/form-data; boundary=----WebKitFormBoundaryrQFFuoCCfmZnvHH9"},

{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"},{"name":"Referer","value":"https://www.avito.ru/profile/login?next=

%2Fprofile"},{"name":"Content-Length","value":"355"}],"id":28,"method":"POST","time":"2015-11-19T12:38:57.595Z","url":"https://www.avito.ru/profile/login"}


Loading started

Request (#29): {"headers":[{"name":"Origin","value":"https://www.avito.ru"},{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 

(KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36"},{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"},

{"name":"Referer","value":"https://www.avito.ru/profile/login?next=%2Fprofile"}],"id":29,"method":"GET","time":"2015-11-

19T12:38:58.360Z","url":"https://www.avito.ru/profile"}
...
Loading finished


Step 3 Open new page
Request (#72): {"headers":[{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.157 

Safari/537.36"},{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"}],"id":72,"method":"GET","time":"2015-11-

19T12:39:13.887Z","url":"https://www.avito.ru/items/edit/678347092"}

Loading started
...Loading finished

Step 4 Edit the price and submit changes

doesn't work

Step 5
 - Confirm changes (instead it's performed submit of the form from the step 4)

Request (#107): {"headers":[{"name":"Origin","value":"https://www.avito.ru"},{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 

(KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36"},{"name":"Content-Type","value":"application/x-www-form-urlencoded"},

{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"},{"name":"Referer","value":"https://www.avito.ru/items/edit/678347092"},

{"name":"Content-Length","value":"8110"}],"id":107,"method":"POST","time":"2015-11-19T12:39:25.950Z","url":"https://www.avito.ru/items/edit/678347092"}

Loading started


Request (#108): {"headers":[{"name":"Origin","value":"https://www.avito.ru"},{"name":"User-Agent","value":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 

(KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36"},{"name":"Accept","value":"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8"},

{"name":"Referer","value":"https://www.avito.ru/items/edit/678347092"}],"id":108,"method":"GET","time":"2015-11-

19T12:39:26.709Z","url":"https://www.avito.ru/ulyanovsk/bytovaya_tehnika/stiralnaya_mashina_indesit_nws_7105_l_novaya_678347092/edit/confirm"}

Loading finished

Loading started


Loading finished

Step 6 - Screenshot

0

phantomjs headless-browser

Источник

user4202579 19 ноя '15 в 06:13

0 ответов

Другие вопросы по тегам phantomjs headless-browser