Нужна помощь по robots.txt
1.
Гоги (03.11.2010 / 19:18)
Как запретить индексацию ссылки (для всех поисковиков) такого вида: site.ru/XXX/?langpack=english ? Читал мануалы, но нифига не смог въехать. С каталогом то конечно вроде все понятно, а тут...
И еще: как показать поисковику, что например каталог, все подкаталоги со страницами были удалены и больше не существуют?
2.
Ванёк (04.11.2010 / 09:37)
Disallow: /XXX без слэша в конце, так запрещает индексировать всю папку XXX иначе никак.
А насчёт удаления, надо средствами mod rewrite бороться, да и зачем поисковику сообщать об удалении папки?
3.
Иван (04.11.2010 / 09:49)
1.
3rd.Mate, как вариант сделать ссылку такого вида site.ru/XXX/langpack/english/ через Mod Rewrite и запретить её через robots.txt
4.
Гоги (04.11.2010 / 10:37)
3.
Fantik, ух ты. спасибо, сразу не догадался.
goldwap, собираюсь удалять раздел, а в нем тысячи проиндексированных страниц. Как бы у поисковика несложилось плохое мнение о сайте. Хотя... Это могут лишь быть мои заблуждения.
5.
Иван (05.11.2010 / 10:36)
4.
3rd.Mate, да не за что )) Спс за +
URL:
https://visavi.net/topics/15208