Есть задача выпарсить выдачу Google Кто в курсе как надо постараться чтобы получить от Google бан по ip. (количество запросов на единицу времени). Какие санкции возможны : полный бан ip временный бан капча мягкий стук по голове...:biggrin: Поделитесь опытом или примерами если есть ....
А примерно сколько запросов надо сделать? Если сделать 1000 с паузами 5-9 секунд между ними – бан вероятен? И вообще как у них реализуется бан - полный отказ доступа к сайту или капча?
по разному бывает.. и капча, и просят проверить свой комп на вирусню и т.д. [HIDE="10"]паузу нужно делать после каждого запроса, + на бан очень сильно влияет тип запроса, если это обычный человеческий запрос, то бан может и не наступить.. а вот если это че-нить типа "phpbb site:.com inurl:forum" то тут бан очень быстро наступит при активном парсинге.. вообще чтоб избежать бана юзай прокси, это все из собстенного опыта...[/HIDE]
