|
|
|
| Подскажите, пожалуйста, у меня на сайте поисковики проиндексировали страницы которые не нужно, как сделать эти страницы недоступные, чтобы они повылетали из индексации?
Я поставил код:
а поисковики проиндексировали эту страницу с текстом Не доступно
Или не имеет смысла, можно оставить эти страницы с этим текстом, дубликатов нет же?
Что посоветуете, плиз!!! | |
|
|
|
|
|
|
|
для: xpom
(01.01.2008 в 17:05)
| | 1) Можно запретить индексацию страниц при помощи META-тэга
<META name="Robots" content="noindex, nofollow">
|
2) Можно запретить индексацию страниц при помощи файла robots.txt
3) Можно запретить доступ к страницам паролем, как это описывается в статье http://www.softtime.ru/info/apache.php?id_article=27. | |
|
|
|
|
|
|
|
для: cheops
(01.01.2008 в 18:19)
| | А как бы Вы, посоветовали запретить?
Но в таком виде как сейчас страницы, лучше не оставлять? | |
|
|
|
|
|
|
|
для: xpom
(01.01.2008 в 19:33)
| | в таком виде точно лучше не оставлять!
запретите метатэгом и файлом robots.txt. Просто некоторые роботы учитывают robots.txt только как рекомендации, а иные и вообще не обращают на него внимание. Вообщем, если Вы не хотите чтобы определенные страницы не были проиндексированы запретите индексаци несколькими способами сразу... | |
|
|
|