Помогите с файлом robots.txt для..

1. Удаленный (31.01.2012 / 13:20)
Мужики скажите какой правильный файл роботс для поисковых роботов, для загруз центра Sea?может у когото стоит и есть или знает.

2. Удаленный (31.01.2012 / 13:32)
я просто х.з. что там прописывать

3. Станислав (31.01.2012 / 13:36)
Ничего не пиши О_о Пиши только то, что не нужно индексировать.

4. Удаленный (31.01.2012 / 13:58)
вот например мне ненадо индексировать папку mod
значит так писать в роботсе?
User-agent: *
Disallow: /mod/
и что значит User-agent: * ?я просто у многих видел и тоже поставил

5. ктулху (31.01.2012 / 14:09)
Значит что для всех роботов.
Можно указать только определённые

6. Удаленный (31.01.2012 / 14:12)
ShiftBHT (31 Января 2012 / 14:09)
Значит что для всех роботов.
Можно указать только определённые
в моем случае,тоесть
User-agent: *
Disallow: /mod/
это правильно?

7. ктулху (31.01.2012 / 14:20)
да, верно

URL: https://visavi.net/topics/28989