parser

Написать ответ на текущее сообщение

 

 
   команды управления поиском

Самообучение

Азат Разетдинов 13.10.2004 16:57

Можно поставить проверку на загрузка файла robots.txt и добавлять агента в список роботов. Таким образом получится самообучающаяся система. Конечно, это годится только для "честных" роботов. Остальных придется вносить в список вручную.