Новости
Видео
Microsoft
Windows 10
Железо
Программы
Форум

Имя пользователя:
Пароль:  
Помощь | Регистрация | Забыли пароль?  | Правила  

Компьютерный форум OSzone.net » Компьютеры + Интернет » Хочу все знать » [решено] Поиск на сайтах. Как обойти ограничение в файле robots.txt

Ответить
Настройки темы
[решено] Поиск на сайтах. Как обойти ограничение в файле robots.txt

Старожил


Сообщения: 167
Благодарности: 8

Профиль | Отправить PM | Цитировать

Изменения
Автор: adgeuk
Дата: 16-08-2012
Изображения
Тип файла: jpg Пример искомой страницы.jpg
(74.7 Kb, 2 просмотров)
Открыл сайт биржи труда - kiosk.fas.ie

Перебирать все предложения дело долгое и утомительное.

Требуется:

- найти все страницы сайта kiosk.fas.ie, в которых присутствует словосочетание:
No Experience Required или Some Experience Required

То есть, найти все вакансии, которые не требуют предварительного опыта работы,
либо требуют лишь некоторый опыт.

Пример искомой страницы в прикреплённом к теме файле.

Делал так:

- вводил в поиск Google: "Some Experience Required" site:kiosk.fas.ie

- результат: Описание веб-страницы недоступно из-за ограничений в файле robots.txt

Как обойти такие настройки сайта и всё-таки выполнить поиск в полной мере?

Отправлено: 19:14, 16-08-2012

 

Старожил


Сообщения: 167
Благодарности: 8

Профиль | Отправить PM | Цитировать

Даю наводящий вопрос:

Если сначала скачать сайт на компьютер, а потом выполнить поиск, как думаете, получится?
У кого опыт есть в этом деле, помогите.

Отправлено: 15:37, 17-08-2012 | #2



Для отключения данного рекламного блока вам необходимо зарегистрироваться или войти с учетной записью социальной сети.

Если же вы забыли свой пароль на форуме, то воспользуйтесь данной ссылкой для восстановления пароля.


Старожил


Сообщения: 167
Благодарности: 8

Профиль | Отправить PM | Цитировать

Способ найден:

использовал программу для скачивания сайтов MetaProducts Offline Explorer.

Скачал сайт (нужную ветку), выполнил поиск, всё нашёл.

Отправлено: 16:34, 17-08-2012 | #3



Компьютерный форум OSzone.net » Компьютеры + Интернет » Хочу все знать » [решено] Поиск на сайтах. Как обойти ограничение в файле robots.txt

Участник сейчас на форуме Участник сейчас на форуме Участник вне форума Участник вне форума Автор темы Автор темы Шапка темы Сообщение прикреплено

Похожие темы
Название темы Автор Информация о форуме Ответов Последнее сообщение
CMD/BAT - Удаление всех файлов кроме одного в подпапках SELFY Скриптовые языки администрирования Windows 2 29-07-2012 15:34
Proxy/NAT - Как создать прокси-сервер для одного сайта. QWERTY1234561 Сетевые технологии 0 02-01-2012 21:57
Разное - Word - Поиск и выделение всей строки с найденным словом Kost Troll Microsoft Office (Word, Excel, Outlook и т.д.) 1 09-07-2011 01:27
Любой язык - Как запустить одновременно две вкладки одного сайта? Ferum01 Скриптовые языки администрирования Windows 2 24-11-2010 10:15
CMD/BAT - [решено] Поиск строк с указанным словом и копирование их в отдельный файл Maartimus Скриптовые языки администрирования Windows 2 13-07-2010 20:25


« Предыдущая тема | Следующая тема »


 
Переход