Здравствуйте!
Подскажите как в файле robots.txt закрыть от индексации профили пользователей?
Путь к пользователю такой: http://www.мой_сайт.ru/users/имя_пользователя
Заранее благодарна всем ответившим.
- Блог
- Войдите или зарегистрируйтесь, чтобы отправлять комментарии
Комментарии
Вроде так:
в robots.txt
# Paths (clean URLs)
Disallow: /user/
да, так правильно, хотя? если меняли алиас для профилей, выставлением автоматического шаблона, посмотрите путь в настройках Pathauto и этот путь запрещайте в robots.
Тракер тоже для каждого озера можно также запретить к индексации
Если используете карту сайта xmlsitemap удалите страницы юзеров из карты, выставлением настроек