Циклы повтора

Тема в разделе "Решение проблем с использованием программы", создана пользователем angelpnz, 8 ноя 2016.

  1. angelpnz

    angelpnz New Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    8
    Всем привет!
    Ребят, подскажите плиз как победить проблему кол-во циклов....
    Проблема в следующем:
    парсю вконтакет, по ссылке 60 000 человек, программа парсит только 998-999 человек
    в скроле сейчас стоит 1 000 000
    как быть?
    Заранее спасибо!
     
    angelpnz, 8 ноя 2016
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Насколько я помню, социальная сеть "Вконтакте" выдает только 1000 результатов в выдаче по человекам (сколько бы не было заявлено результатов поиска). Это ограничение сайта, мы же не можем менять его скрипты.

    С уважением к вам, Сергей.
     
    Root, 8 ноя 2016
    #2
  3. angelpnz

    angelpnz New Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    8

    Спасибо за ответ!
    а как мне быть тогда, посоветуйте пожалуйста...
     
    angelpnz, 9 ноя 2016
    #3
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста.

    Договориться с администрацией соц сети изменить лимиты выдачи. Других вариантов я не вижу.
     
    Root, 9 ноя 2016
    #4
  5. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    ну не все так прискорбно, я думаю что можно просто размножить вариации запроса.
    Например искали город 1, а далее делаем
    город 1, б
    город 1, в
    город 1, д
    и так пока не надоест)
    Но сдается мне, что баном тут светит
     
    Kreol, 9 ноя 2016
    #5
    kagorec и Root нравится это.
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Метод сбора по всем критериям фильтра поиска всеравно не дает гарантии сбора всех на 100%, есть пропуски на процентов 30% потомучто некоторые не заполнили эти поля o_O
    Из метода перебора отлично дает результат по - год рождения, пол.
     
    kagorec, 10 ноя 2016
    #6
    Kreol и Root нравится это.
Similar Threads
  1. kto-to

    Как объединить циклы внутри повторяющихся границ?

    kto-to, 4 сен 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    3
    Просмотров:
    1.571
    Root
    5 сен 2013
  2. aluminoter

    [GETMORECYCLECONTENT] циклы выполнения

    aluminoter, 24 дек 2014, в разделе: Границы парсинга
    Ответов:
    5
    Просмотров:
    2.431
    kagorec
    25 дек 2014
  3. Valeratal

    Как настроить,чтобы циклы из двух повторяющихся были рядом

    Valeratal, 1 июн 2015, в разделе: Решение различных задач по парсингу
    Ответов:
    2
    Просмотров:
    1.020
    Valeratal
    1 июн 2015
Загрузка...

Поделиться этой страницей