Новости | FAQ | Авторы | Документация | В действии | Библиотека |
Инструменты | Полезные ссылки | Хостинги | Скачать | Примеры | Форум |
Азат Разетдинов 13.10.2004 16:57
Можно поставить проверку на загрузка файла robots.txt и добавлять агента в список роботов. Таким образом получится самообучающаяся система. Конечно, это годится только для "честных" роботов. Остальных придется вносить в список вручную.