Re: Помогите разобраться откуда берутся левые get-запросы

Богун Дмитрий vugluskr на vugluskr.org.ua
Пт Ноя 25 01:05:25 UTC 2011


25.11.2011 02:26, valet пишет:
> Я сделал проще, я тупо убрал
> кеширование.
Не поможет, раз боты уже "нашли" эти страницы - то будут их переодически 
проверять. Я когда менял на одном из своих проектов структуру 
ссылок(большой кусок статики переехал на другой набор ссылок) - то даже 
через 3 месяца видел запросы по старым ссылком от гуглового бота и это 
при том, что там отвечали 404, а если ботам отвечать на такие страницы 
200 - то они просто обязаны за ними приходить вновь и вновь.

-- 
Богун Дмитрий aka vugluskr



Подробная информация о списке рассылки nginx-ru