Selenium с PhantomJS: форма входа в Yahoo не отправляется (привязки Python)

Question

Я пишу скрипт на Python 2.7 с использованием Selen Webdriver на OS X, чтобы войти в Yahoo Fantasy Sports и автоматизировать некоторые действия.

Скрипт отлично работает с webDriver Firefox и Chromedriver. Недавно я начал использовать PhantomJS (GhostDriver) и обнаружил, что не могу получить драйвер PhantomJS Selenium (GhostDriver) для входа в формы входа Yahoo.

#!/usr/bin/python
import time
from selenium import webdriver
from selenium.webdriver import PhantomJS
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
from sys import argv
import click

@click.command()
@click.option('--days', type=int, prompt='Number of days to set active lineup', help='Number of days to set active lineup')
@click.option('--username', prompt='Your Yahoo username:', help='Your Yahoo account username')
@click.option('--password', prompt='Your Yahoo passwordname:', help='Your Yahoo account password')
def start_active_players(days, username, password):
    """Simple python program that sets your active players for the next number DAYS."""
    print("Logging in as: " + username)

    dcap = DesiredCapabilities.PHANTOMJS.copy()
    dcap['javascriptEnabled'] = True 
    dcap['browserConnectionEnabled'] = True 
    dcap['acceptSslCerts'] = True
    dcap['localToRemoteUrlAccessEnabled'] = True 
    dcap['webSecurityEnabled'] = True 
    dcap['version'] = ''


    driver = webdriver.PhantomJS(executable_path='/Users/devin.mancuso/node_modules/phantomjs/bin/phantomjs', desired_capabilities=dcap)

    driver.get('https://login.yahoo.com/config/login?.src=spt&.intl=us&.done=http%3A%2F%2Fbasketball.fantasysports.yahoo.com%2Fnba')

    with open('jquery-2.1.3.min.js', 'r') as jquery_js: jquery = jquery_js.read() #read the jquery from a file
    driver.execute_script(jquery) #active the jquery lib

    driver.find_element_by_id('login-username').send_keys(username) 
    driver.find_element_by_id('login-passwd').send_keys(password)
    driver.implicitly_wait(8) # 8 seconds
    driver.find_element_by_name('signin').click()
    #form1 = driver.find_element_by_id('mbr-login-form')
    #form1.submit()
    driver.implicitly_wait(8) # 8 seconds
    driver.save_screenshot('screenshot.png')

    driver.find_element_by_xpath("//a[text() = 'My Team ']").click()
    driver.implicitly_wait(8) # 8 seconds

    for x in range(0, days):

        driver.find_element_by_xpath("//a[text() = 'Start Active Players']").click()
        driver.implicitly_wait(2) # 2 seconds
        date_text = driver.find_element_by_xpath("//span[@class='flyout-title']").text
        print("Starting active players for: " + date_text)
        driver.find_element_by_xpath("//a[contains(@class, 'Js-next')]").click()
        driver.implicitly_wait(2) # 2 seconds

    driver.quit()

if __name__ == '__main__':
    start_active_players()

Сценарий завершается неудачно в строке 47,

driver.find_element_by_xpath ("// a [text () = 'Моя команда']").click()

когда он пытается найти ссылку с текстом My Team. Снимок экрана показывает, что он никогда не проходит через форму входа в систему. Сообщение об ошибке на экране над формой состояния

Пожалуйста, перезагрузите страницу и попробуйте снова или используйте другой браузер

Я видел в этом посте и, таким образом, включил команду execute_script для локальной загрузки в Jquery, но это не помогло. Я не уверен, что это проблема безопасности Yahoo, которая останавливает PhantomJS. Но почему он не работает только в браузере без головы, а не в FF или Chrome?

Я также нашел этот вопрос и попытался отправить саму форму вместо нажатия кнопки, но это не имело никакого значения. Я закомментировал код в примере выше.

PhantomJS версия: 2.0.0

Answer 1

Решением было установить userAgent PhantomJS, используя привязки python. Обнаружено в рекомендациях Эндрю Маги в комментариях и в этом разговоре на github.

DesiredCapabilities.PHANTOMJS['phantomjs.page.settings.userAgent'] = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:16.0) Gecko/20121026 Firefox/16.0'

driver = webdriver.PhantomJS(executable_path='/Users/devin.mancuso/node_modules/phantomjs/bin/phantomjs')