Граждане, не дайте сгинуть от любопытства! Просвятите! Надо ли прописывать в robots.txt файлы и папки, на которые и так нет нигде ссылки? Ведь если сылки нет, то роботы туда не попадут. А вот всякие любопытные личности запросто могут использовать robots.txt чтобы выяснить: а что я пытаюсь от них скрыть!

Я вас, конечно, знаю. Вы сейчас же мне скажете, что файлы, в которые любопытным личностям вход не нужен, должны быть надежно защищены. Это так. Но все же зачем лишний раз искушать людей? Я у себя robots.txt вообще делать не стал. А некоторые у себя его сделали! И вот теперь грусть-тоска меня снедает: а ну как эти некоторые знают что-то такое, о чем мне не ведомо? А ну как robots.txt мне тоже позарез нужен? Просвятите!

Лечу паранойю по фотографии. Дорого.

Отлично!

нет не нужен

Podveg Razvedcheka, при отсутствии понимания смысла этого файла -- именно не нужен. Все верно.

Если хотим ограничеть индексацю нашей странице роботом то создаем файл robot.txt, а если нет то он не нуже. А от нехороших людей поможет .htacces

[:lady:] [:beer:]