Описание тега urllib
Модуль Python, обеспечивающий высокоуровневый интерфейс для получения данных через World Wide Web. Предшественник urllib2. В Python 3 urllib2 и urllib были реорганизованы и объединены в urllib.
1
ответ
Python: сохранить страницу с большим количеством графики в виде файла.html
Я хочу сохранить посещенную страницу на диске в виде файла. Я использую urllib и URLOpener. Я выбираю сайт http://emma-watson.net/. Файл правильно сохраняется в формате.html, но когда я открыл файл, я заметил, что главное изображение сверху, которое…
22 июл '14 в 21:48
1
ответ
Правильный способ реализации пользовательского агента в urllib.request.build_opener
Я пытаюсь установить пользовательский агент для моего запроса urllib: opener = urllib.request.build_opener( urllib.request.HTTPCookieProcessor(cj), urllib.request.HTTPRedirectHandler(), urllib.request.ProxyHandler({'http': proxy}) ) и наконец: respo…
28 окт '18 в 19:19
1
ответ
Использование python urllib и красивого супа для извлечения информации с сайта html
Я пытаюсь извлечь некоторую информацию с этого сайта, т.е. строку, которая говорит: Шкала (Дева + GA + Shapley): 29 шт. / Угловая секунда = 0,029 кпк / угловая секунда = 1,72 кпк / угловая минута = 0,10 Мпк / градус но все после: переменно в зависим…
08 май '15 в 17:51
1
ответ
urllib не работает с запросом API
Я пытаюсь написать этот код, где я запрашиваю эту информацию с openweathermap.org через API и пытаюсь напечатать температуру и местоположение в настоящее время. Большая часть кода представляет собой смесь советов, которые я могу найти в Интернете. Т…
26 дек '17 в 12:32
3
ответа
Загрузка самого последнего файла с FTP с помощью Python
Я пытался написать функцию с Python, которая позволила бы загрузить самый последний добавленный файл (по метке времени в имени файла). Вы можете видеть, что формат имеет большую метку времени. То, что я до сих пор с помощью форумов, является следующ…
14 янв '17 в 10:40
1
ответ
Загрузить файл на сервер Tomcat, используя python
Я написал сервлет Java, который загружает несколько файлов, я использовал CURL для загрузки файла curl -F filedata=@myfile.txt http://127.0.0.1/test_Server/multipleupload это загружает файл в папку uploads который расположен в webapps папка. Я нахож…
22 май '12 в 09:32
1
ответ
Простой POST с использованием urllib с Python 3.3
Я участвую в конкурсе по взлому хешей и пытаюсь автоматизировать отправку строк в html-форму и вернуть счет хеша. До сих пор мне удавалось отправить сообщение SOMETHING на URL, но это не та строка, которую я ожидаю, и, таким образом, значение, возвр…
02 апр '13 в 15:48
2
ответа
Python - обходить ли Malwarebytes заблокированные сайты с помощью urllib?
Вот часть моего кода, которая получает исходный код с веб-сайтов: #Header dictionary headers = {} #Header for websites headers['User-Agent'] = "Mozilla/5.0 (X11; Linux i686) AppleWebKit/537.17 (KHTML, like Gecko) Chrome/24.0.1312.27 Safari/537.17" #…
11 фев '15 в 19:32
0
ответов
Токен запроса Twitter всегда терпит неудачу с 401 в питоне
Я использую urllib и urllib2 для получения токена запроса из твиттера, как рекомендовано здесь https://dev.twitter.com/docs/auth/implementing-sign-twitter, код приведен ниже. Кто-нибудь может увидеть, что я делаю не так? Я получаю 'urllib2.HTTPError…
19 ноя '13 в 18:04
2
ответа
Библиотека запросов не может POST правильно, но urllib успешно [python]
Я пытаюсь отправить запрос к веб-сервисам RSCB PDB, как описано здесь. Я установил URL-адрес и запрос в формате XML: import urllib.request as urllib import requests url = "http://www.rcsb.org/pdb/rest/search" queryText = """ <?xml version="1.0" e…
21 апр '16 в 11:01
2
ответа
Добавление метки времени в файл, загруженный с помощью urllib.urlretrieve
Я использую urllib.urlretrieve Чтобы загрузить файлы, я хотел бы добавить что-то, чтобы проверить изменения перед загрузкой. У меня уже есть что-то вроде следующего: import urllib urllib.urlretrieve("http://www.site1.com/file.txt", r"output/file1.tx…
20 май '13 в 13:26
2
ответа
Строковое кодирование с помощью urllib.urlencode
Для тела почтового запроса я пытаюсь включить: data = [ ('p1', 'true'), ('table', 'f3'), ('ids', '/'R000000020/'') ] в p1=true&table=f3&ids='R000000020' с помощью import urllib payload = urllib.urlencode(data) но я получаю 'p1=true&table…
16 май '17 в 18:02
4
ответа
Извлечение данных из словаря в Python
У меня есть программа от доктора Чака, чтобы напечатать сумму отсчетов из этих данных. Проблема в. Счетчик JSON показывает "2", когда их много.. import json import urllib url="http://python-data.dr-chuck.net/comments_42.json" uh = urllib.urlopen(url…
15 янв '16 в 08:35
1
ответ
python request.get не извлекает результаты, если в параметрах есть # anchor tag
Я пытался это довольно давно Мой URL имеет тег # url = http://www.firstcry.com/search.aspx?q=blue%20jeans#q=@@@@1@0@20@@&gender=Unisex&PageNo=1 Когда я пытаюсь request.get(url) метод, он только выбирает результаты, где url является тегом upt…
28 фев '17 в 17:41
1
ответ
pandas параллельный запрос urllib для Loop
У меня есть код для анализа данных JSON через API, используя urllib, как показано ниже: import pandas as pd import json import urllib.request import os import time import csv import datetime # Send URL Request & Get JSON Data with urllib.request…
12 янв '18 в 22:04
1
ответ
Как удалить старые элементы из списка, который периодически меняется с веб-сайта?
Итак, у меня есть этот код, который печатает все продукты на adidas US, и я хочу, чтобы он проверял, когда новые продукты добавлялись в список, а затем распечатывал этот новый продукт. Прямо сейчас он может распечатать только весь список продуктов. …
22 май '17 в 04:55
1
ответ
Почему Url Decode не конвертирует + в пространство?
Почему + не конвертируется в пробелы: >>> import urllib >>> url = 'Q=Who+am+I%3F' >>> urllib.unquote(url) 'Q=Who+am+I?' >>>
14 мар '15 в 08:10
1
ответ
Сбор VIN на одном сайте
Я пытаюсь войти на этот конкретный сайт (http://www.vinquery.com/login.aspx), и я могу сделать с Selenium, но я не могу сделать с помощью urllib в Python (2.6). Я попробовал так: import urllib import urllib2 import lxml from lxml import etree url='h…
10 фев '12 в 09:17
2
ответа
Что не так с моей функцией urlopen кода?
Ниже приведен мой код Python для проверки ругательства в файле. Но я не могу найти, почему компилятор показывает ошибку: module 'urllib' has no attribute 'urlopen', import urllib def read_txt(): quote = open("c:\\read.txt") #for opening the file con…
28 дек '16 в 22:38
1
ответ
Список папок Google Drive API GET
Я пытаюсь запросить у Google Drive определенный файл, чтобы найти его URL. Вот мой код Единственное, что я изменил, это то, что мой ключ API был заменен на AAAAAAAAAA. queryString = urllib.quote_plus("title = \'" + filename + "\'") parameters = {'ke…
02 авг '16 в 21:11