parser

Написать ответ на текущее сообщение

 

 
   команды управления поиском

Есть тонкости...

serglif 04.03.2005 12:07

1. Нужно отдавать Last-Modified, и при этом желательно не создаваемый простым roll(-1) от date::now, а какой-то локально постоянный, зависимый от обновлений записей с контентом в базе, файле и т.д.

2. Если много страниц на сайте - нужно обрабатывать If-Modified-Since и отдавать статус 304 для неизмененных страниц. У пауков есть квоты на количество забираемых за один раз страниц.

Вообщем если у вас выдается изменяемый Last-Modified и вы не смотрите на запрос паука, чтобы не отдавать ему необновленные страницы, которые уже есть в базе - он может очень-очень долго добираться до некоторых страниц.