0
ответов

Как получить информацию о ценах с www.meinfluessiggas.de в скрипте bash?

На сайте https://www.meinfluessiggas.de необходимо нажать кнопку размера резервуара (раздел «Behältergröße») и ввести почтовый индекс (раздел «PLZ Behälterstandort»), чтобы цена появилась справа. Я хочу ...
04.11.2017
0
ответов

Хранить последние N МБ потока?

В настоящее время я использую wget или curl для загрузки непрерывного AAC-потока. Я хотел бы ограничить то, что хранится на диске, до самых последних N МБ. Другими словами, какой-то ограниченный размер FIFO-буфера (я так понимаю?). ...
23.10.2017
0
ответов

Возобновить загрузку wget с другого зеркала

Я загружал файл bigimage.iso с https : //ftp.slowsite.edu/images/bigimage.iso используя следующую команду wget: wget https://ftp.slowsite.edu/images/bigimage.iso Но FTP ...
01.10.2017
0
ответов

Как загрузить адрес электронной почты, который перешел на веб-страницу с помощью wget? [закрыто]

Как загрузить с веб-сайта адрес электронной почты, указанный на веб-странице? Мне нужно отсканировать все страницы с этого сайта - родительские, дочерние и так далее. Цель состоит в том, чтобы принимать разные адреса электронной почты ...
29.09.2017
0
ответов

попробуйте загрузить файл с сервера, если путь известен

Я захожу на веб-страницу по этому URL-адресу http: //someRandomName.no.meaning: 20025 / hello.html расположение отображаемого hello.html - /var/some/fulder/hello.html. (Я имею в виду, что на сервере это / var / ...
10.08.2017
0
ответов

Как заставить `wget` использовать метод GET для получения реквизитов страницы?

У меня есть простая команда, чтобы получить страницу входа в систему со всеми ее зависимостями: wget --post-data='user=user&password=password' --page-requisites https://…/login Журнал сервера показывает следующее (...
01.06.2017
0
ответов

Переименовать родительский каталог, загруженный wget.

Я использую эту команду для загрузки всего содержимого википедии на главной странице: wget -p -k https://en.wikipedia.org/wiki/Main_Page Но я получаю сообщение об ошибке при попытке чтобы объединить его с -O, чтобы ...
03.09.2016
0
ответов

Рекурсивный wget выдает 'недопустимый символ найден в заданном диапазоне'

Попытка рекурсивно получить содержимое каталога с помощью wget -r --no-parent [URL каталога] Я получаю следующая ошибка Предупреждение: в указанном диапазоне обнаружен недопустимый символ. Указанный ...
11.08.2016
0
ответов

Доступ к каждой строке в файле .txt, ссылки для скачивания и переименования

Допустим, у меня есть файл .txt, в котором есть список ссылок на изображения, которые я хочу загрузить. пример: image.jpg image2.jpg image3.jpg Я использую: cat images.txt | xargs wget, и он отлично работает Что я ...
04.07.2016
0
ответов

Использование WGET для извлечения всех имен файлов из индекса

Я работаю в университете и хочу извлечь все имена файлов из всех имеющихся у нас PDF-каталогов и создать текстовый файл. Все эти PDF-файлы находятся в индексе интрасети. WGET отлично работает с интранетом ...
02.06.2016
0
ответов

Что такое curl-эквивалент этой команды wget?

Я пытаюсь переключить часть сценария с wget на curl. У меня есть эта команда: wget --output-document = dl.html --quiet --timeout = 10 --tries = 1 $ URL. Что это за эквивалент curl?
30.05.2016
0
ответов

Wget a page on imgur

Я пытаюсь сохранить страницу и ее изображения с imgur.com. Все, что я получаю, это страницы, без изображений. Например, вот этот URL: http://imgur.com/gallery/l5NXz Я пробовал следующее: wget -p -k http://imgur....
24.04.2016
0
ответов

циклическая загрузка файла с подчеркиванием в имени файла [дубликат]

У меня есть сценарий, который перебирает несколько входных файлов, однако, поскольку входные файлы содержат символ подчеркивания в имени, я не могу использовать $FILE для вызова файлов, так как это должна быть точка. $FILE _2 не...
23.04.2016
0
ответов

Как я могу преобразовать все HTML-файлы, которые я получаю, в текстовые файлы после команды wget?

Как я могу преобразовать все HTML-файлы, которые я получаю, в простые текстовые файлы после команды wget? Я подумываю использовать lynx для преобразования файлов HTML в файлы ".txt", избавившись от тегов. У меня есть этот фрагмент ...
09.04.2016
0
ответов

wget TLSv1 ведет себя так же, как TLSv1_2

Я использовал wireshark для сравнения curl --tlsv1.0 vs --tlsv1.2 Серверное рукопожатие послушно использует TLSv1.0 для серверов, которые его поддерживают (смысл в том, чтобы проверить, что они не поддерживают): wget url --no-check-...
17.03.2016
0
ответов

использование wget для загрузки всех аудиофайлов (более 100 000 страниц викии)

Я пытаюсь загрузить все аудиофайлы из Вукипедии, вики по «Звездным войнам». Моя первая мысль была примерно такая: wget -r -A -nd .mp3 .ogg http://starwars.wikia.com/wiki/ Это должно быть загружено ...
10.02.2016
0
ответов

wget: Следуйте пользовательским атрибутам URL

wget - отличный инструмент для быстрого снимка небольшого сайта. Насколько я знаю (я очень надеюсь, просто не смог найти это в wget --help), wget может следовать только за известными атрибутами HTML URL, такими как
31.01.2016
0
ответов

Как использовать этот скрипт [закрыто]

#! \ Bin \ bash для i в seq 1 1000; делать wget -q -O котировки http://www.quotedb.com/quote/quote.php?action=random_quote; котировки >> final.txt; готово Я получил этот сценарий с одного веб-сайта, но у меня нет ...
22.01.2016
0
ответов

Инструменты для анализа автоматически сгенерированных индексов HTTP?

Веб-серверы обычно создают индексы каталогов, в которых перечислены файлы в каталоге и дополнительные метаданные. Существуют различия в содержании и форматировании этих страниц, но обычно у них есть ...
11.01.2016
0
ответов

Как извлечь все ссылки из заданного URL-адреса за приличное время

Я пытаюсь извлечь ссылки из указанного URL-адреса и перенаправить их в файл. Сначала я пробовал использовать --spider, это мой код: wget --spider --force-html -m http: // file / path 2> & 1 | grep ...
22.12.2015
0
ответов

Что такое флаг для загрузки скрытых файлов с помощью wget?

Я загрузил большой каталог (с подкаталогами) с http с помощью wget, но скрытые файлы (.filename) не были включены . Как мне его скачать? EDITED для @dhag Я использовал команду: wget --mirror --no-parent ...
16.12.2015
0
ответов

Как загрузить пакет RPM и установить его в одну строку?

Мне интересно, можно ли с помощью wget загрузить RPM, а затем передать его через sudo rpm -i для установки, в одну строку? Я понимаю, что могу просто запустить: wget -c sudo rpm -i ...
27.11.2015
0
ответов

Статическая компиляция wget

Я загрузил исходный код wget и попробовал статическую компиляцию. Я выполнил следующие шаги: ./configure LDFLAGS = -static В конце показан следующий результат: Версия: ...
17.11.2015
0
ответов

Как передать файлы, загруженные с помощью wget, через tar?

Я хотел бы передать tarballs (файлы .tar.gz в данном случае), которые я загружаю с помощью GNU Wget (wget) через tar -xzf (чтобы распаковать их, если это непонятно), но я не знаю как. Я пробовал: wget -q -O- ${...
30.10.2015
0
ответов

Сохранить ../../../ в команде wget

../../../ удаляется, когда я использую его с URL-адресом в команде wget. См. Ниже: user $ wget http: //n0t.meaning.anything: 20000 /../../../ some / folder / file --2015-10-29 16: 48: 13-- http: //n0t.meaning ....
29.10.2015
0
ответов

Загрузить весь сегодняшний stackexchange с помощью wget

Допустим, я хочу рекурсивно загрузить все сегодняшние сообщения на stackexchange, а также любые статьи википедии, на которые они ссылаются. wget -kprcH -l 4 -t 3 stackexchange.com - не лучший вариант, ...
26.10.2015
0
ответов

Как выполнить HTTP-запрос без использования CURL

У меня есть BusyBox v1.8.1 на базе процессора ARM (встроенный Linux) с ограниченными двоичными файлами. Как я могу отправить http-сообщение или разместить без использования curl? У меня есть доступный wget: # wget BusyBox v1.8.1 (2015-04-06 16:22:12 IDT
05.10.2015
0
ответов

curl и wget cut off url

У меня есть веб-cms, который позволяет использовать так называемые идентификаторы действий, которые являются URL-адресами. Когда вы нажимаете на них, они выполняют некоторый код в cms. Поэтому я хотел периодически выполнять действие и использовал для это
21.09.2015
0
ответов

Получение файла с помощью wget, когда имя файла может немного измениться

У меня есть программа, которая берет данные из пяти правительственных источников и объединяет их в одну большую базу данных для моей компании. Я использую wget для получения файлов. Однако я обнаружил, что одна из ...
17.09.2015
0
ответов

wget не может исключить каталоги

Я хочу загрузить файлы с сайта, но хочу исключить определенные каталоги. Я использую следующую команду: wget --user = "xxxx" --password = "xxx" -r -np -nH --cut-dirs = 7 \ --reject "index ....
23.08.2015