Как запретить индексацию поддомена через robots.txt?

Фотограф bfoto.ru, 416 просмотров

сервак почему то отдает по любому поддомену 111.sait.ru 222.sait.ru и т.д код 200 - т.е. главную страницу www.sait.ru
этих поддоменов нету 111.sait.ru 222.sait.ru но яндекс их индесирует.
Что нужно прописать в robots.txt на главном сайте www.sait.ru чтобы запретить индексацию например поддомена 111.sait.ru?

Примечание:
по точнее скажите чего в robots.txt написать -)

Ответы:

Учимся в Израиле

deny "условие"

Rusted

При помощи robots.txt никак, потому что в robots.txt всегда указываются всегда абсолютные _пути_, а не полноценные URL'ы, т.е. домен указать никак нельзя.
Теоретически можно с mod_rewrite'ом заморочится и отдавать запрещающий robots.txt на все хосты кроме www, но это имхо из разряда садо мазо.
По правильному надо подправить конфиги вебсервера, чтобы он отдавал 301/302 ответ с редиректом на www, вместо 200. Если это у вашего хостера такое, то долбите поддержку, чтобы исправили или меняйте хостинг.

starfish.by

вопрос поставлен некорректно -- что бы вы не написали в роботсе основного домена - на сабдоменах это сказаться не должно.
решение тут другое - в каждый сабдомен нужно класть полностью запрещающий роботс файл

13 лет назад

RPI.su - самая большая русскоязычная база вопросов и ответов. Наш проект был реализован как продолжение популярного сервиса otvety.google.ru, который был закрыт и удален 30 апреля 2015 года. Мы решили воскресить полезный сервис Ответы Гугл, чтобы любой человек смог публично узнать ответ на свой вопрос у интернет сообщества.

Все вопросы, добавленные на сайт ответов Google, мы скопировали и сохранили здесь. Имена старых пользователей также отображены в том виде, в котором они существовали ранее. Только нужно заново пройти регистрацию, чтобы иметь возможность задавать вопросы, или отвечать другим.

Чтобы связаться с нами по любому вопросу О САЙТЕ (реклама, сотрудничество, отзыв о сервисе), пишите на почту [email protected]. Только все общие вопросы размещайте на сайте, на них ответ по почте не предоставляется.