Автор Тема: Бан гугла  (Прочитано 4154 раз)

iTeTi

  • Новичок
  • *
  • Сообщений: 14
    • Просмотр профиля
Бан гугла
« : 04 Август 2015, 08:16:55 »
Гугл с месяц каким-то образом изменил систему бана за спам запросами,  при этом если в серппарсере по журналу работы видно что на запрос приходит страница бана, одновременно с этим если строка запроса, которая отправляется гуглу, вставить в обычный браузер, то никакого бана не будет.

Количество результатов на странице влияет в обратном направлении - если при 50 на страницу удается снять 80-90 позиций, то при 10 на страницу бан может прилететь и после 20 позиций.

Прилагаю журнал работы. Предлагаю админу создать проект из 1000 рандомных запросов и снять позиции по гуглу, чтобы воочию увидеть бан и разобраться с возможностью его обхода

byterus

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 1168
    • Просмотр профиля
Re: Бан гугла
« Ответ #1 : 04 Август 2015, 11:38:49 »
iTeTi, спасибо за журнал, во сколько потоков был съем? Как я уже неоднократно писал, ежедневно снимаю с гугла несколько сотен страниц выдачи с локального подключения. Естественно, если увеличить объемы - блокировка неизбежна, нужно использовать прокси.

iTeTi

  • Новичок
  • *
  • Сообщений: 14
    • Просмотр профиля
Re: Бан гугла
« Ответ #2 : 04 Август 2015, 11:51:34 »
1 поток . Ранее осуществлялся съем по 1500 запросам ежедневно. Подобранные задержки позволяли избежать бана.

byterus

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 1168
    • Просмотр профиля
Re: Бан гугла
« Ответ #3 : 04 Август 2015, 12:00:38 »
iTeTi, гугл действительно ужесточил блокировку автоматики в последний месяц, в арсенале программы есть разные движки браузеров, попробуйте менять их
http://serpparser.ru/screenshots/app_options_se_browser_engines.png
плюс поддержка работы через прокси серверы. Еще рекомендую все же переключиться на 10 результатов на странице, да, если пробовать работать сейчас будет тот же бан, но если выждать время когда гугл снимет санкции с вашего IP, то возможно по 10 результатов удастся снять больше позиций и не попасть на блокировку.

iTeTi

  • Новичок
  • *
  • Сообщений: 14
    • Просмотр профиля
Re: Бан гугла
« Ответ #4 : 04 Август 2015, 12:08:52 »
iTeTi, гугл действительно ужесточил блокировку автоматики в последний месяц, в арсенале программы есть разные движки браузеров, попробуйте менять их
http://serpparser.ru/screenshots/app_options_se_browser_engines.png
плюс поддержка работы через прокси серверы. Еще рекомендую все же переключиться на 10 результатов на странице, да, если пробовать работать сейчас будет тот же бан, но если выждать время когда гугл снимет санкции с вашего IP, то возможно по 10 результатов удастся снять больше позиций и не попасть на блокировку.

Как я писал выше, если поставить по 10 на страницу, бан приходит быстрее (по число проверенных запросов).  Может посоветуете где брать прокси?

byterus

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 1168
    • Просмотр профиля
Re: Бан гугла
« Ответ #5 : 04 Август 2015, 12:13:42 »
iTeTi, по качественным прокси, к сожалению, не подскажу. По бесплатным - можете вставить в программу такой список прокси листов
Цитировать
http://hidemyass.com/proxy-list/
http://hidemyass.com/proxy-list/2
http://hidemyass.com/proxy-list/3
http://hidemyass.com/proxy-list/4
http://hidemyass.com/proxy-list/5
http://hidemyass.com/proxy-list/6