Дмитрий Сергеев, Zeptolab- «Написание пауков, или что делать, когда тебя вычисляют по IP»

Как вести себя, если при сборе данных сервер блокирует ваши автоматические запросы, выдавая ошибки 403, 404, 503 и так далее? Дмитрий Сергеев, Zeptolab столкнулся с этим лично, проводя на досуге исследование популярности мемов на одном из популярных информационных ресурсов. Будучи заблокированным по IP, он написал письмо в техподдержку с просьбой разбанить его, на что получил автоматический ответ о разблокировке. Подумав, что, если ему отвечает автомат, то и просить о разблокировке можно автоматически. Что получилось в итоге вы можете узнать, посмотрев видео.