Содержание Robots.txt - находка для недоброжелателя, т.к. в нем содержится список директорий сайта, причем директорий, которые админ не хочет отдавать на всеобщее обозрение.
Хочу его спрятать от обычных юзеров, но показывать поисковым роботам..

Прячу через .htaccess, проверкой по UserAgent`у зашедшего:


Насколько это правильно? Как поисковики отреагируют на такую выборочную отдачу?

тема малость не для раздела PHP, перенес

MoLeX, в разделе PHP быстрее бы ответили  Все таки тема о защите сайта средствами самого сайта.

webevt, Оригинальный вопрос, очень бы хотел услышать на него ответ 

Это сообщение отредактировал(а) Str!pe - 31.3.2008, 22:21

webevt, думаю ничего плохого поисковики за такое не сделают, да и не должны делать, т.к. robots.txt в принципе не обязательный файл и в нем располагаются рекомендации поисковым системам как индексировать ваш сайт, которые никак не влияют на места в выдаче поисковиков.

  , всегда считал что Робот.тхт содержит 


и не о какой защите тут речи и не может идти

Добавлено через 1 минуту и 46 секунд
а на счет:

ты не прав, его быстрее снесли, или же перенесли.   

в роботсе перекрывается то что не должны индексироваьт поисковики, например каталог со скриптами и мног чего еще. Показывать такие вещи конкурентам невсегда приятно.

Идеальный вариант будет отдавать людям 1 роботс, а поисковикам другой 

Str!pe, осталось только отличить мух от котлет  Юзер, который очень хочет ваш роботс, легко представится роботом. А который не хочет - о нём можно забыть 

да, да. 

едиснтвенное это сделать чтобы он немного помучился получая данные...

Если неприятель узнает адрес к админке и начнет ее долбить(пусть даже не добьется своего), будет все равно не очень приятно.


Тот, который не хочет, и дырки в сайте искать не станет, там что, не закрывать их? 
Если подобную информацию можно спрятать, то ее нужно спрятать, имхо.

Благодарю за ответы  

поэтому в последнем проекте сделал так
1. авторизация на сайте
2. идет проверка на твою привелегию
2.1. админ - выводим ссылку внизу страницы вида - http://site/asdjofhbla/?dasj=awgo46
2.2. не админ - не чего не выводим
3. т.к. проверка идет по кукам - заново админа заставляем водить пасс (вдруг куку украли)
4. пускаем в админку

а сама админка проверяет есть ли заданные по умолчанию параметр если нету - пусть хоть заводится  - ему предоствляется обычная хтмл-страничка без последующей отправки веденных данных...

А сначала надо додуматься на РОБОТС глядеть глазами робота  Фишек то много что бы не палиться, вот только не каждый знает где искать, так что все работает.

А если у меня три рабочих лошади? Не легче ли по IP выдавать ссылку на админку или просто заворачивать гостей от страницы авторизации? Хотя для инет магазинов такая фишка не будет целесообразной.

нет не легче... нет не укого выделенного ипи, у всех динамика...

народ собственно вопрос не про целесообразность, а про то как это сделать, вернее про правильность записей.

ИМХО: так бы и сделал как у автора (или приблизительно так) других вариантов к сожелению не вижу