Файл robot.txt, влияет ли на индексацию сайта поисковыми системами?

интернет оптимизация

Какая выгода от того что поисковик не будет видеть те адрес которые в нем указаны, разве это повлияет на первые места в запросах?
Ответы:
Теоретически влияет, а практически - как повезет.
Почему не будет видеть? robots.txt не запрещает доступ, а дает рекомендации.
Зачем это надо? на сайте могут быть страницы, которые не должны попадать в индекс по разным причинам.
У меня его вообще нет !


14 лет назад

RPI.su - самая большая русскоязычная база вопросов и ответов. Наш проект был реализован как продолжение популярного сервиса otvety.google.ru, который был закрыт и удален 30 апреля 2015 года. Мы решили воскресить полезный сервис Ответы Гугл, чтобы любой человек смог публично узнать ответ на свой вопрос у интернет сообщества.

Все вопросы, добавленные на сайт ответов Google, мы скопировали и сохранили здесь. Имена старых пользователей также отображены в том виде, в котором они существовали ранее. Только нужно заново пройти регистрацию, чтобы иметь возможность задавать вопросы, или отвечать другим.

Чтобы связаться с нами по любому вопросу О САЙТЕ (реклама, сотрудничество, отзыв о сервисе), пишите на почту [email protected]. Только все общие вопросы размещайте на сайте, на них ответ по почте не предоставляется.