Имя пользователя:
Пароль:  
Помощь | Регистрация | Забыли пароль?  | Правила  

Компьютерный форум OSzone.net » Компьютеры + Интернет » Вебмастеру » Вопрос. Как исправить robots.txt

Ответить
Настройки темы
Вопрос. Как исправить robots.txt

Аватара для kamea

Новый участник


Сообщения: 15
Благодарности: 0


Конфигурация

Профиль | Отправить PM | Цитировать


Изменения
Автор: kamea
Дата: 24-01-2017
Изображения
Тип файла: png 1.png
(19.3 Kb, 4 просмотров)
Добрый день. Нужна помощь по такому вопросу.

Имеется сайт, сделанный на Джумле+Virtuemart. Последний помещает различную служебную информацию (типа libraries, templates и пр.) в общую папку components, которая в итоге содержит 15 поддиректорий. В robots.txt сейчас директория components закрыта:

Disallow: /components/

Однако в этой же директории!!! также имеется поддиректория com_virtuemart/shop_image/product/, в которую по умолчанию помещаются ВСЕ КАРТОЧКИ ТОВАРА.

И, хотя ниже в robots.txt прописана директива

Allow: /components/com_virtuemart/shop_image/product/

Allow: /components/com_virtuemart/shop_image/product/resized/

позволяющая просмотр карточек товара, у меня есть большое подозрение, что ни Гугл, ни Яндекс эти страницы не индексируют. Во всяком случае, Гугл выдает такую картину: - см. вложение

Вопрос: как правильно закрыть всю директорию components, кроме одной папки com_virtuemart и двух ее подкаталогов?

Буду очень признательна за помощь профи.

Отправлено: 15:55, 21-01-2017

 
mwz mwz вне форума

Аватара для mwz

Ушел из жизни


Сообщения: 8595
Благодарности: 2127

Профиль | Сайт | Отправить PM | Цитировать


Цитата kamea:
кроме одной папки com_virtuemart и двух ее подкаталогов? »
Вообще-то директивы выполняются в порядке их поступления.
Не пробовали в начале разместить разрешения (Allow), а затем уже запреты (Disallow)?
Хотя гарантировать не могу.

-------
Mikhail Zhilin


Отправлено: 00:20, 22-01-2017 | #2



Для отключения данного рекламного блока вам необходимо зарегистрироваться или войти с учетной записью социальной сети.

Если же вы забыли свой пароль на форуме, то воспользуйтесь данной ссылкой для восстановления пароля.


Аватара для kamea

Новый участник


Сообщения: 15
Благодарности: 0

Профиль | Отправить PM | Цитировать


Цитата mwz:
Не пробовали в начале разместить разрешения (Allow), а затем уже запреты (Disallow)? »
Нет, не пробовала. В инструкциях Гугла, вообще-то, написано

Цитата:
Disallow: [the URL path you want to block] - адрес, путь, который вы хотите заблокировать

Allow: [the URL path in of a subdirectory, within a blocked parent directory, that you want to unblock] - путь в подкаталог, блокированном в родительском каталоге, который вы хотите разблокировать.
Т.е. указано, что сначала идет указание к блокируемому адресу, затем - к разрешенному. Если у вас есть другой опыт, расскажите.

Отправлено: 08:21, 22-01-2017 | #3


Новый участник


Сообщения: 49
Благодарности: 2

Профиль | Сайт | Отправить PM | Цитировать


Сначала allow. Но те папки которые Вы хотите разрешить не отвечают в вирте за карточки товаров. Это папки с картинками для товаров и открыв их проиндексируются только изображения дающие Вам трафик из поиска по картинкам при правильной подаче.
Это сообщение посчитали полезным следующие участники:

Отправлено: 12:34, 07-03-2017 | #4



Компьютерный форум OSzone.net » Компьютеры + Интернет » Вебмастеру » Вопрос. Как исправить robots.txt

Участник сейчас на форуме Участник сейчас на форуме Участник вне форума Участник вне форума Автор темы Автор темы Шапка темы Сообщение прикреплено

Похожие темы
Название темы Автор Информация о форуме Ответов Последнее сообщение
CMD/BAT - Извлечение строк in.txt -> out.txt в определенном порядке+форматирование текста. ppm85 Скриптовые языки администрирования Windows 6 29-09-2015 11:29
Разное - [решено] анализ robots.txt makatuk Программирование и базы данных 4 05-11-2014 17:10
[решено] Поиск на сайтах. Как обойти ограничение в файле robots.txt adgeuk Хочу все знать 2 17-08-2012 16:34
[решено] Как правельно написать файл "robots.txt" Spo1iler Тест-форум 1 15-08-2010 22:04
подскажите как правильно создать файл robots.txt oIo_DeN_oIo Вебмастеру 9 16-12-2005 01:33




 
Переход