Вопросы по теме 'wget'

Wget с входным файлом и выходным документом
У меня есть список URL-адресов, которые я хотел бы передать в wget, используя --input-file. Однако я не могу понять, как одновременно управлять значением --output-document, что просто, если вы вводите команды одну за другой. Я хотел бы сохранить...
6645 просмотров
bash wget xargs
schedule 26.10.2023
crontab с wget - почему он запускается дважды?
У меня есть скрипт php, который запускается из веб-службы и вставляется в БД. crontab -e ......other cron tasks above....... ... .. .. # Run test script.php at 1610 10 16 * * * /usr/bin/wget -q -O /home/username/my_cronjobs/logs/cron_adhoc...
3514 просмотров
wget crontab
schedule 10.03.2024
Как вы исправляете wget от смешивания данных загрузки при запуске нескольких одновременных экземпляров?
Я запускаю скрипт, который, в свою очередь, несколько раз вызывает другой скрипт в фоновом режиме с разными наборами параметров. Вторичный скрипт сначала выполняет wget по URL-адресу ftp, чтобы получить список файлов по этому URL-адресу. Он...
462 просмотров
bash wget unix multiprocessing
schedule 25.09.2022
Curl и wget: почему не используется параметр GET?
Я пытаюсь получить данные с этой страницы, используя wget и curl в PHP. Как вы можете видеть с помощью браузера, результатом по умолчанию является 20 элементов, но, установив для параметра GET iip значение x, я могу получить x элементов, т. е....
14113 просмотров
shell curl wget
schedule 07.05.2024
Использование wget в crontab для запуска PHP-скрипта
Я настроил задание cron на своем сервере Ubuntu. По сути, я просто хочу, чтобы эта работа вызывала php-страницу на другом сервере. Затем эта php-страница очистит некоторые данные в базе данных. Поэтому я подумал, что было бы неплохо вызвать эту...
17490 просмотров
ubuntu linux wget crontab
schedule 29.11.2023
wget для загрузки профиля Facebook / страниц друзей
Я пытаюсь загрузить в facebook страницу профиля пользователя с помощью «wget», но продолжаю получать непрофильную страницу с именем «browser.php», которая не имеет ничего общего с этим конкретным пользователем. URL-адрес страницы профиля, который я...
15719 просмотров
facebook web-crawler wget user-profile
schedule 19.09.2022
Как проверить, доступна ли строка на странице https через командную строку в Windows?
Я полагаю, что это простой вопрос, но я не уверен, как поступить. Я хочу проверить, доступна ли данная строка на определенном https-адресе через командную строку. На самом деле я могу использовать Internet Explorer в качестве https-клиента с...
420 просмотров
cmd windows openssl batch-file wget
schedule 03.12.2022
gawk, чтобы прочитать последний бит двоичных данных по каналу без тайм-аута?
У меня есть программа, уже написанная на gawk, которая загружает множество небольших фрагментов информации из Интернета. (Медиа-сканер и индексатор) В настоящее время для получения информации запускается wget. Это нормально, но я бы хотел просто...
194 просмотров
http wget awk gawk
schedule 20.09.2022
Вместо загрузки Java JDK в Linux через wget отображается страница лицензии.
Когда я пытаюсь загрузить Java из Oracle, я вместо этого загружаю страницу, сообщающую мне, что мне нужно согласиться с условиями лицензии OTN. Извините! Чтобы загружать продукты из Oracle Technology Network, вы должны согласиться с...
491328 просмотров
linux installation java wget
schedule 14.11.2023
Как я могу выразить этот цикл Python for в Haskell?
Иногда, когда я хочу использовать wget , я просто печатаю кучу строк с помощью Python, например: >>> for i in range(25): ... print "http://www.theoi.com/Text/HomerOdyssey", i, ".html" ... http://www.theoi.com/Text/HomerOdyssey 0...
762 просмотров
python iteration io wget haskell
schedule 15.05.2024
Очистить веб-форму ASPX с помощью wget?
Для проекта сбора/анализа данных я пытаюсь загрузить записи в веб-форме aspx по адресу http://www.lasuperiorcourt.org/civilcasesummarynet/ui/?CT=AP&casetype=appellate , но пока у меня мало успехов. Идея состоит в том, чтобы загрузить...
3422 просмотров
asp.net wget
schedule 09.02.2024
как решить проблему с пустым index.html с помощью wget?
Я хочу загрузить все файлы в папку на удаленном сервере. Я использую Wget на клиенте Windows, моя команда: >wget -r http://www.example.com/getfeed/d165161dasdvc561551as1v6/soccerfixtures/england/ эта строка дает мне размер index.html (0...
1648 просмотров
command-line download wget
schedule 04.04.2024
wget/curl скачать файл
У меня следующая проблема. Я хотел бы скачать текст по следующей ссылке: http://www.ncbi.nlm.nih.gov/nuccore/NC_021206.1?report=fasta&log$=seqview&format=text Я пробовал как с wget , так и с curl , но вместо загрузки текстового файла они...
586 просмотров
curl wget
schedule 14.11.2022
загружает ли рекурсивный wget посещенные URL-адреса?
Я хочу использовать wget для рекурсивной загрузки полной веб-страницы. Если, например, страницы 2-го уровня глубины содержат ссылки на страницы 1-го уровня (которые уже были загружены), загрузит ли их wget снова? Если да, то есть ли способ...
120 просмотров
bash recursion wget
schedule 01.11.2022
crontab не может запустить сценарий оболочки, который wgets URL-адрес через указанный интервал
У меня есть следующая команда внутри сценария оболочки в /home/ubuntu/wget_my_url.sh содержание ping_my_url следующее: wget -O - -q -t 1 http://www.someurl.com/baseurl/ В приведенном выше файле нет разрыва строки. Я сделал chmod +x...
154 просмотров
ubuntu linux cron wget crontab
schedule 25.10.2023
Как загрузить HTTP-каталог со всеми файлами и подкаталогами в том виде, в каком они отображаются в списке онлайн-файлов / папок?
У меня есть доступ к онлайн-каталогу HTTP. Я попытался загрузить все подкаталоги и файлы через wget . Но проблема в том, что когда wget загружает подкаталоги, он загружает index.html файл, который содержит список файлов в этом каталоге, без...
357367 просмотров
download http get html wget
schedule 07.04.2024
Несколько wget для сохранения нескольких локальных файлов с соглашением об именах
Резюме Я участвую в проекте поискового робота PHP и хочу извлекать RSS-каналы новостей почти с сотни новостных веб-сайтов с помощью wget (версия 1.12) для захвата всех файлов RSS-каналов в одном каталоге. (без иерархии) на локальном сервере в...
688 просмотров
xml php cron rss wget
schedule 28.11.2022
java.security.cert.CertificateException при подключении к серверу с несколькими сертификатами
Я пытаюсь создать SSL-соединение с веб-сайтом ( https://www.otten-markenshop.de/ ), и с помощью браузера или curl это работает, но ни wget, ни Java не удается подключиться. Меня больше всего интересует, почему код Java дает сбой. Вот подробности...
1122 просмотров
java ssl certificate wget
schedule 10.12.2022
Wget, как сохранить файл в определенном месте
Я использую эту команду wget -r --accept "*.ext" --level 2 "example.com/index1/" который работает нормально. теперь я хочу определить путь и имя файла, где я хочу сохранить свой файл Какие-либо предложения Спасибо
1447 просмотров
linux wget
schedule 22.11.2023
Как заставить wget перезаписать существующий файл, игнорируя метку времени?
Я пробовал «-N» и «--no-clobber», но единственный результат, который я получаю, — это получение новой копии существующего файла example.exe с числом, добавленным с использованием этого синтаксиса «example.exe.1». Это не то, что я хотел бы получить....
78754 просмотров
wget
schedule 20.11.2023