Показать полную графическую версию : [решено] wget команда не закачивает файл по ссылке
v79italya, мы меняем в урлах параметр crumb, который берём из страницы с таблицей (u1) с помощью регулярного выражения. Они могут изменить текст, имя параметра, способ проверок и тд., и тогда придётся корректировать. По крайней мере с ноября 2018 ничего не менялось, судя по дате блога. Это не публичный API yahoo, где есть какие-то гарантии. Если у них есть API для загрузки этих котировок, то безусловно нужно использовать его.
UPD: нашёл спец. адрес для получения crumb здесь (https://github.com/markcheno/go-quote/blob/5962cd528b5ca2081140157aaa8c52bba5364df9/quote.go#L533) (_https://query1.finance.yahoo.com/v1/test/getcrumb). Обновил пост со скриптом.
v79italya
07-07-2019, 08:18
Sham, спасибо за второй вариант скрипта. увидел где можно менять паузу между обращениями на сайт. еще, по моему, есть изменения в строках, относящихся к crumb, но я не разбираюсь в этом и ладно.
на счет crumb я сильно не переживаю. как перестанет работать, возьму с сайта рабочую ссылку и в Excel по быстрому изменю концовку всех ссылок. так и делал для макроса. не будет работать, тогда, чтож, подыму тему), там видно будет. мне это надо то один раз в месяц для аналитики. а так все работает. спасибо большое
Nordek, извиняюсь, только ваш вариант так и не запустил. да и ладно. уже есть решение от Sham
слушайте, а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл. вот ссылка- https://finance.yahoo.com/quote/AAL/options?p=AAL&date=1565913600
там нет готового csv. поэтому и хотел узнать
ссылка сохранилась не полностью
https://finance.yahoo.com/quote/AAL/options?p=AAL&date=1568937600
а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл »
Там json надо разбирать из страницы. Можно, но ненадёжно. Ищите API этих таблиц.
v79italya
08-07-2019, 05:23
json надо разбирать из страницы » вот это я не фига не понял
Ищите API этих таблиц » тоже не понял, но готов искать. как искать? дать объявление на авито - ищу API таких таблиц ?)
еще вопрос. как на этом форуме правильнее, открыть новую тему или можно продолжить в этой?
v79italya
13-07-2019, 20:37
Sham, скажите, вы сможете это сделать? я про это:
слушайте, а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл. вот ссылка- https://finance.yahoo.com/quote/AAL/...ate=1565913600
там нет готового csv. поэтому и хотел узнать
v79italya, можно, но изначально это json (в таком виде (взят только нужный массив) https://pastebin.com/G6v74TYW ), который нужно перелопатить в csv. Это спарсено со страницы, поэтому в любой момент может всё поменяться.
v79italya
14-07-2019, 13:17
можно »
хорошо что можно. я так понял что Вы это сможете сделать. запишу Ваши контакты из профиля. приспичит - обращусь.
сейчас у меня есть вариант получения этих данных. макросами и формулами в Excel за 30 минут получаю нужные данные с >11500 тикеров. когда сломается, если не смогу исправить, обращусь к Вам. c .csv обработаю в Power Query. по времени, наверное, быстрее получится.
приносило бы еще все это прибыль, а то гоняю демосчет уже больше года.
Помогите с скриптом для скачивания файла по ссылке https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe
sov44, А в чём проблема? C:\tmp>wget "https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe"
--2019-12-30 19:01:18-- https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe
Resolving kjkpub.s3.amazonaws.com (kjkpub.s3.amazonaws.com)... 52.216.141.164
Connecting to kjkpub.s3.amazonaws.com (kjkpub.s3.amazonaws.com)|52.216.141.164|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 15253672 (15M) [application/x-msdownload]
Saving to: 'SumatraPDF-prerelease-11842-64.exe'
SumatraPDF-prerelease-11842-6 12%[=====> ] 1,78M 298KB/s eta 48s ^C
C:\tmp>wget --version
GNU Wget 1.20.3 built on mingw32.
...
iglezz, хм, сработало. Видимо был какой-то глюк ПК. :dont-know
bin\wget.exe --no-check-certificate -P "%~dp0TempZ" "https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe"
NLOLegion
03-01-2020, 16:02
а как скачать все фото с любой группы в вк? например со стены. Wget -ом? Возможно?
DJ Mogarych
03-01-2020, 16:18
Есть более удобные инструменты для этого, типа VK Paranoid tools.
NLOLegion
03-01-2020, 16:27
DJ Mogarych, нужно чтобы батник сам скачивал фото для (например) обой на комп и/или на цифровую фоторамку и т. п. важно средствами cmd/bat это сделать
© OSzone.net 2001-2012
vBulletin v3.6.4, Copyright ©2000-2025, Jelsoft Enterprises Ltd.