Помогите с файлом robots.txt для..

Печать RSS
247

Автор
Дух
0
Мужики скажите какой правильный файл роботс для поисковых роботов, для загруз центра Sea?может у когото стоит и есть или знает.
Автор
Дух
0
я просто х.з. что там прописывать

ВЕЛИКИЙ и УЖАСНЫЙ!
0
Ничего не пиши О_о Пиши только то, что не нужно индексировать.
Автор
Дух
0
вот например мне ненадо индексировать папку mod
значит так писать в роботсе?
User-agent: *
Disallow: /mod/
и что значит User-agent: * ?я просто у многих видел и тоже поставил

Ктулху
0
Значит что для всех роботов.
Можно указать только определённые
Автор
Дух
0
ShiftBHT (31 Января 2012 / 14:09)
Значит что для всех роботов.
Можно указать только определённые
в моем случае,тоесть
User-agent: *
Disallow: /mod/
это правильно?

Ктулху
0
да, верно
Стикеры / Теги / Правила / Топ тем / Топ постов / Поиск