|
|
ru.nethack- RU.NETHACK ------------------------------------------------------------------- From : Anton Borisov 2:5022/115.70 09 Jan 2003 03:53:19 To : All Subject : а вот такой вопрос --------------------------------------------------------------------------------
Hе знаю, насколько тут будет топично, но правил, к сожалению я не нашел.
Итак, есть сайт А с достаточно большим количеством посетителей в день. Hа нем
есть определенные разделы, информация в которых берется с сайта B, причем
информация эта обновляется с периодичностью 1-2 дня. Администраторы сайта B
видимо люди злые и жадные - они смортят статистику - ага приходит чувак все
время с одного ip, за пару секунд качает 5-6 страниц и отваливает - и так от 200
до 1000 и более раз в день. Они секут фишку и меняют сначала формат в котором
лежит информация, потом местоположение, потом еще что-то, в последний раз вообще
ввели систему с регистрацией, правда бесплатной.
Hу информация должна быть свободной для всех :), поэтому мною это все
благополучно обходиться (спасибо библиотеке сURL, например :), правда, в виду
того, что происходит это непредсказуемо, удовольствия мне это не доставляет.
Какие есть идеи для того чтобы не вызывать у них подозрений? Использовать
прокси, может быть несколько, написать какой-нибудь интеллектуальный кэш для
этой информации, что еще? Что вообще может им не нравиться - одинаковые headerы,
малое время соединения, ip-адрес?
С уважением, Anton.
---
* Origin: Бабло всегда побеждает зло. (2:5022/115.70)
Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
Архивное /ru.nethack/38933e1ce42e.html, оценка из 5, голосов 10
|