Автор Тема: URL запрещен к индексации в robots.txt  (Прочитано 598 раз)

0 Пользователей и 1 Гость просматривают эту тему.

timelessness

  • Гость
Прошу вашей помощи.
При добавлении в Яндекс сайта на индексацию в Яндекс, вижу следующее:
Цитировать
Указанный URL запрещен к индексации в файле robots.txt
Кто может помочь?
 

Calipso

  • Гость
URL запрещен к индексации в robots.txt
« Ответ #1 : 10 Апреля 2015, 11:59:57 »
Я могу.
Проверьте файл  .htaccess на всякий случай (мало ли). Но в общем в 99% случаев такая ошибка возникает из-за неправильно прописаной директивы host в robots.txt.
Надо: Host: myhost.ru или _www.myhost.ru, то есть без http://
 

TMU

  • Гость
Если сайт создан на юкозе и ещё молодой, то ничего удивительного. Они открывают индексацию в роботсе только через 30 дней, чтобы поменьше доров делали.
 

 

В быстром ответе можно использовать BB-теги и смайлы.

Имя: E-mail: