Как отключить потоки?

Тема в разделе "Решение различных задач по парсингу", создана пользователем qweeeraz, 20 авг 2018.

Метки:
  1. qweeeraz

    qweeeraz New Member Пользователи

    Регистрация:
    27 май 2018
    Сообщения:
    6
    Город:
    Екатеринбург
    При парсинге сайта в "Мониторинге используемых при парсинге данных" наблюдаю зависание некоторых потоков, в итоге 4 зависших потока создают нагрузку на ЦП 100% и ПК зависает. Как-то можно выставить таймаут, чтобы если поток не может обработать документ, например, за 1 минуту, то принудительно его закрывать?

    Помогите пожалуйста, уже надоело перезапускать программу при приближении загрузки процессора к 100%, чтобы сбросить зависшие потоки.
     
    qweeeraz, 20 авг 2018
    #1
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Приветствую.
    Ну так надо искать корень проблемы.
    Нужно найти сайт который вызывает зависание и посмотреть почему он зависает.
    Вы же описали опять астральную проблему.
    Может вы в 50 потоков с wbapp запускаете? попробуйте в 1 поток, если тоже самое, значит надо копать в сторону сайта. Зависшие потоки сбрасываются через определенное время, но если это wbapp то надо указывать сколько ждать чтоб он сбросился.
     
    Kreol, 29 авг 2018
    #2
Similar Threads
  1. babblosy

    Парсинг контента доходит до 0 документов в сек. но есть активные потоки

    babblosy, 7 мар 2013, в разделе: Решение проблем с использованием программы
    Ответов:
    7
    Просмотров:
    2.704
    fox
    16 ноя 2015
  2. masskill

    Как отключить парсинг картинок

    masskill, 28 фев 2015, в разделе: Скачивание картинок и файлов
    Ответов:
    3
    Просмотров:
    1.111
    Root
    28 фев 2015
  3. freman

    Как отключить повторную загрузку фото

    freman, 19 авг 2015, в разделе: Скачивание картинок и файлов
    Ответов:
    3
    Просмотров:
    1.081
    freman
    20 авг 2015
  4. jeDauphin

    Виснут потоки при парсинге

    jeDauphin, 20 авг 2015, в разделе: Решение проблем с использованием программы
    Ответов:
    1
    Просмотров:
    679
    Root
    21 авг 2015
  5. mat

    Отключить трекбеки и пингбеки

    mat, 17 ноя 2017, в разделе: Функции и интерфейс программы
    Ответов:
    2
    Просмотров:
    646
    mat
    17 ноя 2017
Загрузка...

Поделиться этой страницей