robots.txt и web.archive.org @ DeForum.ru
DeДверь  
Логин:  
Пароль:  
  Автологин  
   
Разместить рекламу
Письмо админу
Правила | FAQ | *Поиск | Наша команда | Регистрация | Вход
 
 
 Страница 1 из 1 [ Сообщений: 2 ] 
*   Список форумов / Начинка и техника / Программирование для WWW » ответить » создать топик « | »
Автор Сообщение
plumpy Муж.
соучастник
10
Сообщения: 968
Зарегистрирован: 16.10.01
Откуда: Moscow / St-Petersburg / Amsterdam
Заголовок сообщения: robots.txt и web.archive.org
Сообщение Добавлено: 14 Октябрь 2007, 11:57:13 
Уважаемые коллеги!
Мне нужно запретить сайт Клиента к индексации пауком archive.org
Подскажите, пожалуйста, как правильно зовется этот робот?
Заранее спасибо :)

_________________
Всегда рад предложить купить iPad у оптовиков, оборудование для минитипографий, тиражирование dvd, тиражирование Blu-ray, готовые DVD и Blu-ray комплекты для выставок и презентаций.
Crazy Муж.
Модератор
107
Сообщения: 14561
Зарегистрирован: 23.12.01
Откуда: Moscow
Сообщение Добавлено: 14 Октябрь 2007, 13:08:22 
plumpy, лениво дочитать FAQ на их сайте хотя бы до второго пункта?

Тема закрыта. Причина — «Нет предмета для обсуждения».
*   Список форумов / Начинка и техника / Программирование для WWW « | » » ответить » создать топик
 Страница 1 из 1 [ Сообщений: 2 ] 
Показать сообщения за:   Поле сортировки  
Найти:
Перейти:  
Уровень доступа: Вы не можете начинать темы. Вы не можете отвечать на сообщения. Вы не можете редактировать свои сообщения. Вы не можете удалять свои сообщения. Вы не можете добавлять вложения.
cron


ООО ДеФорум
При использовании материалов сайта ссылка на DeForum.ru — обязательна.
Проект Павла Батурина ©2001-2077; // Powered by phpBB © 2013 phpBB Group
Rambler's Top100