Вот такой файл робота я поставила в корневой каталог сайта, воспользовавшись информацией с "Википедии":
User-agent: * Disallow: /downloads/ Request-rate: 1/5 Visit-time: 0600-0845 # загружать не более одной страницы за пять секунд # загружать страницы только в промежуток с 6 утра до 8:45 по Гринвичу.
Обрадовалась, ага... Проверяю, а он и не действует. выдает :"Неизвестная директива для робота". Пришлось воспользоваться описанием составления файла робота в Яндексе. И, как ни странно, работает. Реклама не все! правильная информация важнее! Александра.
|