Как собрать все команды twill вместе в один кусок кода в файле.py?
Я только начал изучать TWILL.
Twill - удивительный язык сценариев для просмотра веб-страниц, и он делает все, что я хочу!!!
До сих пор я использовал twill из оболочки Python (точнее,IDLE (Python GUI)), и я делаю там что-то, выполняя команды одну за другой (я имею в виду, я набираю одну команду, запускаю ее, затем набираю следующая команда): http://roundcan.narod.ru/some_pics/22.jpg http://roundcan.narod.ru/some_pics/23.jpg http://roundcan.narod.ru/some_pics/24.jpg http://roundcan.narod.ru/some_pics/25.jpg http://roundcan.narod.ru/some_pics/26.jpg http://roundcan.narod.ru/some_pics/27.jpg http://roundcan.narod.ru/some_pics/28.jpg Но я не знаю, как собрать все эти команды в один файл.py, чтобы все они выполнялись один за другим автоматически.
Кажется, в твилле такая возможность есть. Этот пример со страницы документации Twill (вы можете увидеть его ЗДЕСЬ) показывает нам один кусок кода, состоящий из нескольких команд: http://roundcan.narod.ru/some_pics/19.jpg Итак, мой вопрос: как можно Я положил все команды в твил?
Обновление 1:
(это обновление - мой ответ С. Марку)
Привет, С.Марк!!! Прошу прощения за поздний ответ. Прежде всего, немного информации о расположении моих папок, связанных с twill и python:
Путь, где Python2.5 установлен на моем компьютере: C:\Python25
Путь к моему twill-0.9 на моем компьютере сейчас: E:\tmp\twill-0.9
Допустим, я хочу, чтобы следующие команды выполнялись автоматически:
go http://www.yahoo.com
save_html result.html
Этот код должен просмотреть страницу Yahoo, а затем сохранить ее HTML-код в файле result.html. Поэтому, пытаясь следовать Вашим инструкциям, я сначала создал файл "test.txt", содержащий этот код, состоящий всего из 2 строк, и сохранил этот файл как "test.twill" в папке twill-0.9, что означает, что полный путь к этому файл теперь был E:\tmp\twill-0.9\test.twill
Затем я попытался передать имя файла в качестве параметра команде twill-sh разными способами, но это не сработало (должно быть, я что-то делал не так): http://roundcan.narod.ru/some_pics/29.jpg http://roundcan.narod.ru/some_pics/30.jpg Но вы знаете, что, я решил немного поэкспериментировать и создал файл test.py, который также содержал только эти две команды. Этот файл я также поместил в папку twill-0.9 (E:\tmp\twill-0.9\test.py), а затем решил попробовать запустить его из оболочки twill с помощью команды runfile twill, и, что удивительно, это сработало!: http://roundcan.narod.ru/some_pics/31.jpg
После запуска я посмотрел папку C: \ Python25 и нашел там только что созданный файл result.html!
Что ж, здесь я просто запустил файл из оболочки twill с помощью команды twill. Хотя в настоящий момент это именно то, что мне нужно, другие сторонники (как вы можете видеть ниже) предлагают мне делать все из оболочки Python, а не из оболочки Twill, и я до сих пор не знаю, как это сделать.
Следующим моим шагом будет попытка запустить подобный код в "Google App Engine", но там, насколько мне известно, распознается только Python, а не твил, что означает, что если я знаю, как делать вещи в твилле, но кроме Python, я не смогу заставить "Google App Engine" выполнять мои команды.
Обновление 2:
(Пятница, 23 апреля 2010 г., 3:48:15 (GMT+0,00))
(Это обновление - мой второй ответ S.Mark)
Кажется, что запуск его из командной строки также не удался: http://roundcan.narod.ru/some_pics/32.jpg
4 ответа
Поместите ваши команды twill в файл, например test.twill
setlocal query "twill Python"
go http://google.com/
fv 1 q $query
submit btnI # use the "I'm feeling lucky" button
show
А затем просто передайте имя файла в качестве параметра команде twill-sh, например
python twill-sh test.twill
И вы можете проверить.twill примеры кодов в tests папка источника твилла
test-back.twill
test-basic.twill
test-dns.twill
test-equiv-refresh.twill
test-find.twill
test-form.twill
test-formfill.twill
test-global-form.twill
test-go-exit.twill
....
Вот оно в действии (немного изменилось):
>>> import twill.commands
>>> import BeautifulSoup
>>>
>>> class browser:
... def __init__(self, url="http://www.google.com",log = None):
... self.a=twill.commands
... self.a.config("readonly_controls_writeable", 1)
... self.b = self.a.get_browser()
... self.b.set_agent_string("Mozilla/5.0 (Windows; U; Windows NT 5.1; en-GB; rv:1.8.1.14) Gecko/20080404 Firefox/2.0.0.14")
... self.log = log
... self.b.clear_cookies()
... self.url=url
... def googleQuery(self, query="python code"):
... self.b.go(self.url)
... #self.b.showforms()
... f = self.b.get_form("f")
... #print "form is %s" % f
... f["q"] = query
... self.b.clicked(f, "btnG")
... self.b.submit()
... pageContent = self.b.get_html()
... soup=BeautifulSoup.BeautifulSoup(pageContent)
... ths = soup.findAll(attrs={"class" : "l"})
... for a in ths:
... print a
...
>>> t=browser()
>>> t.googleQuery("twill queries")
==> at http://www.google.ie/
Note: submit is using submit button: name="btnG", value="Google Search"
<a href="http://pyparsing.wikispaces.com/WhosUsingPyparsing" class="l" onmousedown="return clk(this.href,'','','res','1','','0CBMQFjAA')">pyparsing - WhosUsingPyparsing</a>
<a href="http://www.mail-archive.com/twill@lists.idyll.org/msg00048.html" class="l" onmousedown="return clk(this.href,'','','res','2','','0CBcQFjAB')">Re: [<em>twill</em>] <em>query</em>: docs, and web site.</a>
<a href="http://www.mail-archive.com/twill@lists.idyll.org/msg00050.html" class="l" onmousedown="return clk(this.href,'','','res','3','','0CBkQFjAC')">Re: [<em>twill</em>] <em>query</em>: docs, and web site.</a>
<a href="http://www.genealogytoday.com/surname/finder.mv?Surname=Twill" class="l" onmousedown="return clk(this.href,'','','res','4','','0CB4QFjAD')"><em>Twill</em> Genealogy and Family Tree Resources - Surname Finder</a>
<a href="http://a706cheap-apparel.hobby-site.com/ladies-cotton-faded-twill-le-chameau-breeks-42" class="l" onmousedown="return clk(this.href,'','','res','5','','0CCEQFjAE')">Ladies Cotton Faded <em>Twill</em> Le Chameau Breeks 42</a>
<a href="http://twill.idyll.org/examples.html" class="l" onmousedown="return clk(this.href,'','','res','6','','0CCMQFjAF')"><em>twill</em> Examples</a>
<a href="http://panjiva.com/Sri-Lankan-Manufacturers-Of/twill+capri" class="l" onmousedown="return clk(this.href,'','','res','7','','0CCcQFjAG')">Sri-Lankan <em>Twill</em> Capri Manufacturers | Sri-Lankan Suppliers of <b>...</b></a>
<a href="http://c586cheap-apparel.dyndns.ws/twill-beige-blazer" class="l" onmousedown="return clk(this.href,'','','res','8','','0CCoQFjAH')"><em>Twill</em> beige blazer</a>
<a href="http://stackru.com/questions/2267537/how-do-you-use-relative-paths-for-twill-tests" class="l" onmousedown="return clk(this.href,'','','res','9','','0CCwQFjAI')">How do you use Relative Paths for <em>Twill</em> tests? - Stack Overflow</a>
<a href="http://mytextilenotes.blogspot.com/2010/01/introduction-to-twill-weave.html" class="l" onmousedown="return clk(this.href,'','','res','10','','0CC8QFjAJ')">My Textile Notes: Introduction to <em>Twill</em> Weave</a>
>>>
Я использую Ubuntu, поэтому я использую следующее для установки BeautifulSoup и Twill:
sudo apt-get install BeautifulSoup*
sudo apt-get install python-twill*
Как это помогает
Я думаю, что вместо того, чтобы использовать оболочку twill, вы должны вместо этого напрямую вызывать функции, используя api twill python http://twill.idyll.org/python-api.html.
import string, re, sys, os
import twill.commands
class browser:
def __init__(self, url="www.google.com", query="python code", log = None):
self.a=twill.commands
self.a.config("readonly_controls_writeable", 1)
self.b = self.a.get_browser()
self.b.set_agent_string("Mozilla/5.0 (Windows; U; Windows NT 5.1; en-GB; rv:1.8.1.14) Gecko/20080404 Firefox/2.0.0.14")
self.log = log
self.b.clear_cookies()
self.url=url
self.b.go(self.url)
f = self.b.get_form("1")
# self.log.debug("form is %s" % f)
f["q"] = query
self.b.submit()
self.log.debug( "Links\n%s" % self.b.showlinks())
self.log.debug( "Forms\n%s" % self.b.showforms())
pageContent = self.b.get_html()
self.log.debug("html is <<%s>>" % pageContent)