Подвисает проверка прокси

Тема в разделе "Прокси для парсинга", создана пользователем GRINE, 12 авг 2019.

  1. GRINE

    GRINE Member Пользователи

    Регистрация:
    23 янв 2017
    Сообщения:
    90
    Периодическая повторная проверка прокси зависает на час или более на проверке последнего прокси - Ссылки недоступны для гостей

    настройки - Ссылки недоступны для гостей

    С чем может быть связано?
     
    Последнее редактирование: 12 авг 2019
    GRINE, 12 авг 2019
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    На днях постараюсь решить вопрос.
     
    Root, 12 авг 2019
    #2
    GRINE и kagorec нравится это.
  3. GRINE

    GRINE Member Пользователи

    Регистрация:
    23 янв 2017
    Сообщения:
    90
    ещё пока не решили? очень мешает - бывает почти целые сутки висит
     
    GRINE, 20 авг 2019
    #3
  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Как вариант, смените прокси сервис если там тормознутые прокси.
    Бывало парсил миллионами через прокси (автообновление списка через nnnnn страниц) и подобные подвисания не встречались.
    Прокси от разных сервисов использовались, повторюсь - зависаний не наблюдалось.

    п.с. Если не секрет, напишите название прокси сервиса (под большим хайдом).
     
    kagorec, 20 авг 2019
    #4
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Как-то взялся и оставил. Мотивации никакой нет, увы.
     
    Root, 20 авг 2019
    #5
  6. GRINE

    GRINE Member Пользователи

    Регистрация:
    23 янв 2017
    Сообщения:
    90

    Дело не в прокси, там проверяется 7-10 тыс прокси и стопорится на последней
    Раньше не было такого, появилось после обновления
     
    Последнее редактирование: 20 авг 2019
    GRINE, 20 авг 2019
    #6
    kagorec нравится это.
  7. GRINE

    GRINE Member Пользователи

    Регистрация:
    23 янв 2017
    Сообщения:
    90
    а как можно повлиять на то, чтобы появилась мотивация?
    Может нам всем скинуться на данный фикс или может обновление какое-нибудь приобрести в частном порядке или может ещё какие варианты?
    Просто очень нужен этот функционал(
     
    GRINE, 20 авг 2019
    #7
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Добавлена 5 минутная проверка на "подвисание" потоков при проверке прокси.

    Замените файл Content Downloader.exe (в папке с программой) этим файлом:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 87 постов.**
     
    Root, 9 сен 2019
    #8
    GRINE нравится это.
Similar Threads
  1. Valiks

    Перестали работать прокси

    Valiks, 18 янв 2012, в разделе: Решение проблем с использованием программы
    Ответов:
    18
    Просмотров:
    11.454
    kagorec
    11 апр 2020
  2. СТЕПАН

    Проверка прокси на бан

    СТЕПАН, 13 мар 2013, в разделе: Решение проблем с использованием программы
    Ответов:
    2
    Просмотров:
    3.875
    СТЕПАН
    13 мар 2013
  3. gans

    Проверка домена во время парсинга

    gans, 2 ноя 2017, в разделе: Решение различных задач по парсингу
    Ответов:
    2
    Просмотров:
    633
    gans
    2 ноя 2017
  4. 0619225

    Проверка статуса ответа сервера и проверка наличия вхождения в коде

    0619225, 7 май 2018, в разделе: Решение различных задач по парсингу
    Ответов:
    1
    Просмотров:
    607
    Root
    8 май 2018
  5. Xpite

    Проверка границы парсинга на язык (проверка на наличие указанных подстрок в тексте)

    Xpite, 27 мар 2019, в разделе: Решение различных задач по парсингу
    Ответов:
    1
    Просмотров:
    476
    Root
    27 мар 2019
Загрузка...

Поделиться этой страницей