Новости	FAQ	Авторы	Документация	В действии	Библиотека
Инструменты	Полезные ссылки	Хостинги	Скачать	Примеры	Форум

Форум Войти | Регистрация

Правильный робот всегда запрашивает /robots.txt.

G100m 23.01.2007 14:13

Это сообщение без текста

почему Гул-бот показывает себя как мозилла?, agat 23.01.2007 13:02
- Нормально он себя показывает..., Sumo [M] 23.01.2007 13:34
  - нда..., agat 23.01.2007 13:36
    - Ответ, Spearance 23.01.2007 13:55
      - а поподробнее?, agat 23.01.2007 13:57
        Ответ, Spearance 23.01.2007 20:50
        Просто отбросьте USER_AGENT'ы в которых..., Sumo [M] 23.01.2007 14:06
    - класс нормальный для своих применений., Misha v.3 [M] 23.01.2007 13:41
      - посоветуйте тогда правильное решение, agat 23.01.2007 13:53
        Правильный робот всегда запрашивает /robots.txt. (-), G100m 23.01.2007 14:13
        мы с такими задачами не сталкивались, Misha v.3 [M] 23.01.2007 13:58 / 23.01.2007 14:58