Python-эквивалент `curl -v http://example.com/`

Question

Python-эквивалент `curl -v http://example.com/`

Я экспериментировал с различными модулями Python, такими как pycurl а также requests но все еще не может получить curl -v <URL> вывод, как показано ниже.

Желаемый выход (в коде Python)

C:\>curl -v http://example.com/
*   Trying 93.184.216.34...
* TCP_NODELAY set
* Connected to example.com (93.184.216.34) port 80 (#0)
> GET / HTTP/1.1
> Host: example.com
> User-Agent: curl/7.52.1
> Accept: */*
>
< HTTP/1.1 200 OK
< Cache-Control: max-age=604800
< Content-Type: text/html; charset=UTF-8
< Date: Mon, 21 Jan 2019 00:34:32 GMT
< Etag: "1337+ident"
< Expires: Mon, 28 Jan 2019 00:34:32 GMT
< Last-Modified: Fri, 09 Aug 2013 23:54:35 GMT
< Server: ECS (sjc/4E29)
< Vary: Accept-Encoding
< X-Cache: HIT
< Content-Length: 1270
<
<!doctype html>
<html>
... input truncated ...
</html>
* Curl_http_done: called premature == 0
* Connection #0 to host example.com left intact

C:\>

Так как это в Windows, я не хочу использовать os.system а также subprocess модули как curl.exe не там по умолчанию.

Вот мои попытки... Но я все еще не получил аналогичный результат, как произведено curl -v

>>> import requests
>>> requests.get("http://example.com").content
>>> requests.get("http://example.com").text

>>> import pycurl                        
>>> c = pycurl.Curl()                    
>>> c.setopt(c.URL, 'http://example.com')
>>> c.perform()

1

python python-3.x windows python-requests pycurl

Источник

user9013730 21 янв '19 в 01:04

2 ответа

Другие вопросы по тегам python python-3.x windows python-requests pycurl

user3418959 21 янв '19 в 01:18 2019-01-21 01:18 · Answer 1 · 2019-01-21 01:18

Если вы ищете информацию о Last-Modified, Cache-Control и т. д., в requests вы можете проверить headers,

>>> import requests
>>> req = requests.get("http://example.com")
>>> req.headers
{'Content-Encoding': 'gzip', 
'Accept-Ranges': 'bytes', 
'Cache-Control': 'max-age=604800', 
'Content-Type': 'text/html; charset=UTF-8', 
'Date': 'Mon, 21 Jan 2019 01:13:53 GMT', 
'Etag': '"1541025663"', 
'Expires': 'Mon, 28 Jan 2019 01:13:53 GMT', 
'Last-Modified': 'Fri, 09 Aug 2013 23:54:35 GMT', 
'Server': 'ECS (dca/24A0)', 
'Vary': 'Accept-Encoding', 
'X-Cache': 'HIT', 
'Content-Length': '606'}

user5971137 21 янв '19 в 02:53 2019-01-21 02:53 · Answer 2 · 2019-01-21 02:53

Без каких-либо сторонних пакетов (например, requests), в Python 3.7.2:

>>> import urllib.request
>>> dict(urllib.request.urlopen("http://example.com").headers)
{'Accept-Ranges': 'bytes', 'Cache-Control': 'max-age=604800', 'Content-Type': 'text/html; charset=UTF-8', 'Date': 'Mon, 21 Jan 2019 02:52:13 GMT', 'Etag': '"1541025663+gzip"', 'Expires': 'Mon, 28 Jan 2019 02:52:13 GMT', 'Last-Modified': 'Fri, 09 Aug 2013 23:54:35 GMT', 'Server': 'ECS (sjc/4E8B)', 'Vary': 'Accept-Encoding', 'X-Cache': 'HIT', 'Content-Length': '1270', 'Connection': 'close'}

документы