Вы здесь

Сайт Drupal в поиске яндекса

0

Здравствуйте! Захотел проиндексировать сайт drupal в поиске яндекса. Проверил файл robots.txt на вебмастер. Все директории и файлы были disollow. Я так понимаю это запрет на индексирование?! Выходит что поисковый робот яндекса не будет индексировать мой сайт да и вообще любой сайт на cms drupal?

Версия Drupal: 
7.x
Вопрос задан 11.02.2015 - 09:21

Ответы

5

В стандартном robots.txt, который вы получаете при установке друпала закрыты от индексации служебные папки, типа:

Disallow: /includes/
Disallow: /misc/
Disallow: /modules/

и т.п.. Это весьма полезно) Поисковику не стоит ползать по вашим служебным файлам - они никому не нужны, там не содержимое вашего сайта, а код. А по содержимому он будет вполне хорошо ходить и индексировать.

Ответ дан 11.02.2015 - 10:05

Хорошо! Я скорее всего не допонимаю этот момент, но стоит запрет на все все папки и файлы! До единого! Или же пути к моему содержимому никак не связаны с этими папками абсолютно?

Комментарий оставлен 11.02.2015 - 12:52

никак не связаны. В этих папках не ваш контент а служебные данные. Ваш контент не имеет "папок" ))

Комментарий оставлен 11.02.2015 - 13:29
0

Все директории и файлы были disollow.

Дайте адрес сайта

Ответ дан 11.02.2015 - 12:58