Сделайте запрос GET и распечатайте тело ответа с помощью Python (Twisted)
На веб-сайте Twisted есть пример под названием "Получение ответов", который показывает, как, помимо прочего, получать заголовки ответа и код ответа, но не тело ответа (фактическое тело HTML, возвращаемое запросом на сайт).
в def cbrequest(response), как мне распечатать HTML-текст, возвращаемый GET-запросом на example.com? Они показывают такие методы, как response.headers для получения заголовков, но я не видел метода для возврата тела внешнего интерфейса.
http://twistedmatrix.com/documents/12.1.0/web/howto/client.html
from pprint import pformat
from twisted.internet import reactor
from twisted.internet.defer import Deferred
from twisted.internet.protocol import Protocol
from twisted.web.client import Agent
from twisted.web.http_headers import Headers
class BeginningPrinter(Protocol):
def __init__(self, finished):
self.finished = finished
self.remaining = 1024 * 10
def dataReceived(self, bytes):
if self.remaining:
display = bytes[:self.remaining]
print 'Some data received:'
print display
self.remaining -= len(display)
def connectionLost(self, reason):
print 'Finished receiving body:', reason.getErrorMessage()
self.finished.callback(None)
agent = Agent(reactor)
d = agent.request(
'GET',
'http://example.com/',
Headers({'User-Agent': ['Twisted Web Client Example']}),
None)
def cbRequest(response):
print 'Response version:', response.version
print 'Response code:', response.code
print 'Response phrase:', response.phrase
print 'Response headers:'
print pformat(list(response.headers.getAllRawHeaders()))
finished = Deferred()
response.deliverBody(BeginningPrinter(finished))
return finished
d.addCallback(cbRequest)
def cbShutdown(ignored):
reactor.stop()
d.addBoth(cbShutdown)
reactor.run()
Изменить: я попытался распечатать response.deliverBody(BeginningPrinter(закончено)), чтобы получить текст ответа, но безрезультатно
1 ответ
Когда я делаю отступ connectionLost
метод, так что это правильно метод на BeginningPrinter
и не только свободно плавающая функция, это отлично работает. Я запустил его на Twisted 15.4.0, так что, возможно, вам стоит попробовать обновить его?