Форум SERP Parser

Основной раздел => Ошибки => Тема начата: iTeTi от 04 Август 2015, 08:16:55

Название: Бан гугла
Отправлено: iTeTi от 04 Август 2015, 08:16:55

Гугл с месяц каким-то образом изменил систему бана за спам запросами,  при этом если в серппарсере по журналу работы видно что на запрос приходит страница бана, одновременно с этим если строка запроса, которая отправляется гуглу, вставить в обычный браузер, то никакого бана не будет.

Количество результатов на странице влияет в обратном направлении - если при 50 на страницу удается снять 80-90 позиций, то при 10 на страницу бан может прилететь и после 20 позиций.

Прилагаю журнал работы. Предлагаю админу создать проект из 1000 рандомных запросов и снять позиции по гуглу, чтобы воочию увидеть бан и разобраться с возможностью его обхода

Название: Re: Бан гугла
Отправлено: byterus от 04 Август 2015, 11:38:49

iTeTi, спасибо за журнал, во сколько потоков был съем? Как я уже неоднократно писал, ежедневно снимаю с гугла несколько сотен страниц выдачи с локального подключения. Естественно, если увеличить объемы - блокировка неизбежна, нужно использовать прокси.

Название: Re: Бан гугла
Отправлено: iTeTi от 04 Август 2015, 11:51:34

1 поток . Ранее осуществлялся съем по 1500 запросам ежедневно. Подобранные задержки позволяли избежать бана.

Название: Re: Бан гугла
Отправлено: byterus от 04 Август 2015, 12:00:38

iTeTi, гугл действительно ужесточил блокировку автоматики в последний месяц, в арсенале программы есть разные движки браузеров, попробуйте менять их
http://serpparser.ru/screenshots/app_options_se_browser_engines.png
плюс поддержка работы через прокси серверы. Еще рекомендую все же переключиться на 10 результатов на странице, да, если пробовать работать сейчас будет тот же бан, но если выждать время когда гугл снимет санкции с вашего IP, то возможно по 10 результатов удастся снять больше позиций и не попасть на блокировку.

Название: Re: Бан гугла
Отправлено: iTeTi от 04 Август 2015, 12:08:52

Цитата: byterus от 04 Август 2015, 12:00:38

iTeTi, гугл действительно ужесточил блокировку автоматики в последний месяц, в арсенале программы есть разные движки браузеров, попробуйте менять их
http://serpparser.ru/screenshots/app_options_se_browser_engines.png
плюс поддержка работы через прокси серверы. Еще рекомендую все же переключиться на 10 результатов на странице, да, если пробовать работать сейчас будет тот же бан, но если выждать время когда гугл снимет санкции с вашего IP, то возможно по 10 результатов удастся снять больше позиций и не попасть на блокировку.

Как я писал выше, если поставить по 10 на страницу, бан приходит быстрее (по число проверенных запросов).  Может посоветуете где брать прокси?

Название: Re: Бан гугла
Отправлено: byterus от 04 Август 2015, 12:13:42

iTeTi, по качественным прокси, к сожалению, не подскажу. По бесплатным - можете вставить в программу такой список прокси листов

Цитировать

http://hidemyass.com/proxy-list/
http://hidemyass.com/proxy-list/2
http://hidemyass.com/proxy-list/3
http://hidemyass.com/proxy-list/4
http://hidemyass.com/proxy-list/5
http://hidemyass.com/proxy-list/6