robot txt

как написать в файле роботс тхт для хорошой индексацыи
в даный момент написано так
User-agent: *
Disallow:
Disallow: /speech/

Host: bookvik.com

В интернете ведь полно информации по этому поводу

Konstantinnn007, полно но фиг знает что за что отвечает

Тут много полезной информации: http://robotstxt.org.ru/

????✡???????? ????

DeviD4411, אנדרו לכתוב בצורה ברורה יותר!

‫ סבאבא

Добавлено через 01:07 сек.
רציתי לירשום לכם שלום

Добавлено через 02:33 сек.
Отрешенный NERVOUS., סבאבא
רציתי לירשום לכם שלום
?אתה יודע עברית

Добавлено через 03:49 сек.
Отрешенный NERVOUS., Я и русский знаю просто отправил смайлик и они не записались.

Шалом алейхем )))

Роботс тхт - это простейший инструмент,
и ссылки на дополнительную информацию уже скинули )

С новыми алгоритмами пс я бы не говорил что это простейший инструмент, сейчас даже не знаешь прописывать кей или нет

простейший. кроме вышеуказанного сайта, анализ и рекомендации есть в панелях гугл вебмастер и яндекс вебмастер.
ни чего важного там нет, в принципе. разве что зеркало и запрет индексации что бы мусор в индекс не шел.
автор наивно думает что пропишет пару волшебных строк в этом файле и индексация подскачет на пару порядков?)
наверняка еще и путая индексацию, индекс, и выдачу