Автор Тема: Ошибка сети и медленная работа  (Прочитано 420 раз)

byterus

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 1066
    • Просмотр профиля
Re: Ошибка сети и медленная работа
« Ответ #15 : 10 Май 2018, 11:04:59 »
romkon,  в вашем случае есть две проблемы - 
 1. некачественные прокси;
 2. нестабильный доступ к Google на локальном подключении.

В качестве решения, могу рекомендовать приобрести качественные прокси для парсинга Google. Программа поддерживает работу с HTTP IPv4 прокси.

romkon

  • Новичок
  • *
  • Сообщений: 23
    • Просмотр профиля
Re: Ошибка сети и медленная работа
« Ответ #16 : 10 Май 2018, 12:19:39 »
Ясно, спасибо! Попробую более дорогие варианты прокси и запущу сбор из другой страны.

romkon

  • Новичок
  • *
  • Сообщений: 23
    • Просмотр профиля
Re: Ошибка сети и медленная работа
« Ответ #17 : 17 Май 2018, 07:43:02 »
Запущено локально вне РФ - всё летает, а с прокси - та же ошибка. Осталось понять - f*** RKN or Rostelekom...
Upd: я поторопился. Та же ошибка с локальным, хотя сбор продолжается. https://drive.google.com/open?id=173W2qZgLfNNWgwtmSxtfI1jPN43vztGs
« Последнее редактирование: 17 Май 2018, 07:57:06 от romkon »

byterus

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 1066
    • Просмотр профиля
Re: Ошибка сети и медленная работа
« Ответ #18 : 18 Май 2018, 03:15:18 »
romkon , ошибка уже другая, гугл выдает 403 ошибку
http://prntscr.com/jjcdm3
обсуждается например тут
https://productforums.google.com/forum/#!topic/websearch/yL1M1vW5hWM

судя по журналу, гугл запрашивает слишком много капч, проблема скорее всего из-за капчи. Попробуйте включить для гугл галочку Делать паузы между блоками CAPTCHA
http://serpparser.ru/doc_options.html#engines_captcha
установите для начала 20 минут задержки после 5 капч.