Неинтерактивный сетевой загрузчик GNU (может вызываться из сценариев, заданий cron, терминалов без поддержки X-Windows и т. Д.), Который получает контент с веб-серверов. Название происходит от всемирной паутины и получается.
2 ответа

Доступ к базе данных itop (через oql) с помощью python urllib2

Я пытаюсь получить доступ к базе данных Itop через его общий веб-интерфейс. Я получил это работает с помощью сценария оболочки: #!/bin/bash export http_proxy='' SERVER=itop-test SELECT_STATEMENT="SELECT Ticket" wget -q -O - \ --http-user=myusername …
28 окт '13 в 13:25
1 ответ

Linux: WGET - отсутствует схема с использованием опции -i

Я пытаюсь загрузить несколько файлов из Yahoo Finance, используя wget. Для этого я использовал скрипт Python для создания текстового файла со всеми URL-адресами, которые мне нужны. При загрузке одного файла (CSV-файл) используйте следующий код: wget…
21 май '13 в 16:21
2 ответа

Займет много времени установки и обновления пакетов с помощью wget на Arch Linux

Я не знаю, почему при загрузке, установке или обновлении пакета скорость загрузки очень низкая? и займет очень много времени!!!! Когда я работаю в Windows, моя скорость загрузки составляет 1M, но в арке можно изменить, это между 50k и 100k? я исполь…
04 янв '17 в 20:00
1 ответ

Wget не загружает каждую папку

Эй, у меня есть скрипт bash, запускающий команду wget для получения каталога: wget -r -nH --cut-dirs=5 "ftp://$USER:$PASS@stumpyinc.com/subdomains/cydia/httpdocs/theme/themes/$theme_root" И что он должен сделать, это загрузить структуру папок, котор…
09 май '11 в 02:52
0 ответов

Использование wget в C++ - плохая практика? (Linux)

В настоящее время я работаю над программой для Linux, которая загружает данные с веб-сервера. Я достиг этого с system("wget <url etc...>") и это, кажется, работает хорошо, поскольку это только делает работу. Однако я прочитал, что призвание wg…
03 апр '16 в 20:05
2 ответа

Получить файл с сервера Ubuntu

У меня есть сервер Ubuntu, работающий с резервными копиями БД. Как получить резервные копии? Я использую *.pem файл для входа в систему. Я пробовал почту с mailx. Я выполняю команду, но безуспешно. Я не получаю сообщений об ошибках echo "something" …
16 сен '12 в 15:09
4 ответа

Wget с входным файлом и выходным документом

У меня есть список URL-адресов, которые я хотел бы ввести в wget, используя --input-file. Однако я не могу понять, как управлять значением --output-document в одно и то же время, что очень просто, если вы вводите команды одну за другой. Я хотел бы с…
12 янв '10 в 02:26
0 ответов

Хотите пропустить URL-адреса для конвертации? до%3F

Я использую следующую команду для WGET сайты wget -e robots=off -mkEpnp --restrict-file-names=nocontrol -d -P[FOLDER_PREFIX] [DOMAIN_NAME] Однако эта команда создает папку, содержащую все .html страница, где ссылки выглядят примерно так: css/styles.…
30 окт '17 в 10:01
1 ответ

Точно рассчитанные загрузки с Wget

Я загружаю 1 изображение, которое меняется каждый раз, когда к сайту обращаются 4 раза. Должна быть ровно одна секунда между каждым загруженным изображением. Загрузка изображения занимает несколько миллисекунд, однако возникает проблема, заключающая…
13 фев '15 в 01:14
1 ответ

wget - запретить создание пустых каталогов

Есть ли способ остановить wget от создания пустых каталогов? Большинство нужных мне файлов находятся на одном уровне глубины, т.е. в папке 2 /1/2/, но мне нужно использовать бесконечную рекурсию, потому что иногда нужный мне файл находится в 1/2/3/ …
03 мар '16 в 14:41
0 ответов

Докер и Джулия: Утилита wget не найдена в пути

Я сделал докер тянуть Centos: последняя и расстегнутая молнии 0,7 внутри контейнера. wget находится в системном PATH внутри контейнера. однако, когда я добавляю и собираю Ipopt из REPL, я получаю "Утилита wget не найдена в вашем PATH". что делать?
04 окт '18 в 23:58
1 ответ

Создавайте каталоги и загружайте файлы, читая входные данные из файла

cat paste_output.txt | while read -r file_name path_name file; do mkdir -p -- "$path_name"; wget "$file_name"; mv "$file" "$path_name"; done; Привет! У меня есть этот кусок кода, который читает поле за полем из указанного файла. Здесь я пытаюсь созд…
12 ноя '17 в 10:06
1 ответ

Временный сбой в разрешении имени -wget в linux

Я использую Python Code Solution (автоматизация) в Linux В рамках теста я вызываю разные api (rest) и подключаюсь к моему sql db. Я бегу решение 24/7 Душа делает Вызовите API с помощью Wget Каждые 1 мин выборки БД с запросом в течение 60 мин. Снова …
06 янв '17 в 06:49
0 ответов

Docker хост на AWS не может wget

Я не могу подключиться к Nexus с моего хоста докера. шаги: Я установил Docker на AWS Linux и создал образ. Затем я запустил экземпляр, основанный на изображении. Я вхожу в инстанс (докер хост) и докер работает Я пытаюсь wget на хосте, чтобы получить…
25 авг '17 в 21:05
4 ответа

В чем разница между curl и wget ниже?

curl -o mnist.zip -L http://webdocs.cs.ualberta.ca/~bx3/data/mnist.zip curl: (7) Не удалось подключиться к порту 5870 58.96.175.173: соединение отклонено wget -o mnist.zip http://webdocs.cs.ualberta.ca/~bx3/data/mnist.zip успешно загрузил mnist.zip.…
07 янв '16 в 06:27
2 ответа

Использование sed для чтения количества байтов веб-сайта из wget

Я пытаюсь распечатать только небольшую часть вывода команды wget. Если я наберу wget http://google.com --spider --server-response Я получаю длинный список вывода на терминал, который я хочу найти. Одна из этих строк Content-Length: 219 Все, что я хо…
15 окт '15 в 02:31
1 ответ

Не переходить по ссылкам с зеркалом

Я пытаюсь отразить сайт. Я хочу загрузить все MP3-файлы и убедиться, что я не перезагружаю те, которые у меня уже есть (отсюда и "зеркальная" часть). Я набрал следующее: wget -m -nd -e robots=off --random-wait -A "*.mp3" -P FOLDER http://www.example…
21 фев '18 в 23:57
1 ответ

Ошибка wget при попытке загрузить файлы

Я пытаюсь загрузить файлы с веб-сайта с помощью wget, я попробовал эту команду, которую я нашел в Интернете: wget -r -l1 -H -t1 -nd -N -np -A.zip -erobots=off https://website.name/mydownloads.php Я запустил powershell в одной из моих папок и использ…
21 апр '18 в 08:42
4 ответа

Выполнять команды с переменной цикла параллельно, не более N одновременно

У меня три тысячи файлов на сервере. Я могу получить по одному через вызов REST API. Я написал команду для получения этих файлов. Это работает отлично, но для моего времени входа в систему после примерно 200 загрузок. Я хотел бы загружать все эти фа…
21 апр '15 в 10:45
0 ответов

Сайт Wget и UTF-8

Я хочу загрузить свой собственный веб-сайт в виде простого html (http://www.dariomac.com) с wget для создания оффлайн-портфолио. Моя проблема в том, что wget загружает весь сайт правильно, но некоторые символы сохраняются неправильно. Например, мое …
15 ноя '12 в 02:31