Индексация сайта для поиска
Допустим есть некий сайт на котором много нужной для меня информации и я мне постоянного нужно найти на нём что-то. Вот допустим мне нужно найти статью, содержащую слова "Москва" "хостинг" и "Иванов", но я не могу это сделать потому как:
1) На сайте нет поиска по статьям
2) Найти нужную статью через поисковые системы Яндекс и Google невозможно, потому как сайт не индексируется этим самым Яндексом из-за того, что доступ к страницам возможен только после авторизации, а сайт работает по https.
Но у меня-то аккаунт на сайте есть. Такая мысль возникла, если это не может сделать Яндекс, могу ли я самостоятельно сайт проиндексировать? Какое существует ПО для этого?
|
Цитата:
Цитата RasKolbas
1) На сайте нет поиска по статьям »
|
Какой сайт? Какой поиск есть?
|
RasKolbas, скачать сайт локально и искать :)
|
Если RasKolbas'а не забанять за это...
|
Цитата:
Цитата Yewgeniy
Если RasKolbas'а не забанять за это... »
|
Не забанят.
|
Vadikan, скачать сайт программой вроде WebCopier?
Пробовал, не качает
|
RasKolbas, любому грабберу нужно а) дать указание использовать Ваши учётные данные (в разных приложениях реализовано может быть по разному), и б) граббер должен уметь работать не только по http, но и по https (коль ресурс требует именно этого протокола).
|
Iska, вот я тоже подумал, что WebCopier поддерживает не все способы авторизации на сайтах, всё-таки старая программа. А какие ещё грабберы есть, более продвинутые?
|
Время: 17:21.
© OSzone.net 2001-