Парсинг емейлов с форума вбуллетин

Discussion in 'Парсинг конкретных сайтов по запросу (ПЛАТНО)' started by eurohunter, Jul 29, 2014.

  1. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Всем доброго времени суток. Столкнулся со сложностью при сборе емейл адресов пользователей форума вбуллетин. Настройки сбора ссылок выставил вот такие:
    [​IMG]
    Работает с около 8ми часов, но пока не нашлось еще ни одной ссылки с параметром из фильтра. Может быть я делаю что то неправильно?
     
    eurohunter, Jul 29, 2014
    #1
  2. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    Уточните ссылку, в тег hide
     
    Kreol, Jul 29, 2014
    #2
  3. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
     
    eurohunter, Jul 29, 2014
    #3
  4. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    простите, открыл 6 страниц, не увидел ни одного емайла, а где они должны быть-то?
     
    Kreol, Jul 29, 2014
    #4
  5. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Мыла видны залогиненым юзерам
    [​IMG]
    Урлы вида домен/sendmessage.php?do=mailmember&u=**** доступны и незалогиненым, просто емейл не виден.
     
    Last edited: Jul 29, 2014
    eurohunter, Jul 29, 2014
    #5
  6. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    зарегистрировался, все равно не вижу. Куда зайти, чего нажать? Поиграем дальше?
     
    Kreol, Jul 29, 2014
    #6
  7. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Зайти в профиль любого пользователя, и если он не скрыл мыло в настройках, то вот тут

    [​IMG]

    Есть такие, кто скрыли, но чаще открыто
     
    Last edited: Jul 29, 2014
    eurohunter, Jul 29, 2014
    #7
  8. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Likes Received:
    3,485
    Здравствуйте.
    Ссылку на профиль пользователя с открытым мылом, пожалуйста.
    Если нужно авторизоваться для того, чтобы увидеть мыло, пожалуйста и логин с паролем дайте.
    Спасибо!
     
    Root, Jul 29, 2014
    #8
  9. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    просмотрел 10 человек с репутациями хорошими, ни у одного не нашел мыло. Так что да, просьба линк на профиль с мылом.
     
    Kreol, Jul 29, 2014
    #9
  10. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Likes Received:
    1,422
    Столько пользователей, а толку от ботов (нарегистрированные пользователи автоматическими программами вроде xrummer) ?
    В вашей задаче главное авторизацию передать парсеру, зацепить границу и потом парсите в 50 потоков, адвор вам в помощь Ссылки недоступны для гостей
    Еще желательно поставить условие чтоб парсило только при авторизированном аккаунте.
    [​IMG]
    На скриншоте подсказка, тоесть выделив границей часть кода которая видна только авторизированному, и если эта часть будет отсутствовать подряд сколькото раз то парсинг приостановится.
     
    kagorec, Jul 30, 2014
    #10
  11. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    То ли мне везет так, но большинство профилей на форуме с открытым мылом
     
    Last edited: Jul 30, 2014
    eurohunter, Jul 30, 2014
    #11
  12. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Likes Received:
    3,485
    Очень тривиальная и простая задача!
    Файл проекта прилагаю...
    PS: Авторизация в кнопке с изображением ключика во вкладке "контент".
    Версия программы должна быть последней!
     

    Attached Files:

    Root, Jul 30, 2014
    #12
  13. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    Либо вариант если есть как раз первая ссылка. Все равно сначала сделал, а потом увидел, что Root уже побывал тут)
     

    Attached Files:

    Kreol, Jul 30, 2014
    #13
  14. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Большое спасибо за готовые проекты, но этот форум был лишь только для примера. Мне нужно именно понять, как это делается.

    Для парсинга к примеру форумных постов, я задавал в фильтре ссылок параметр showthread.php? (такой параметр имеют все ссылки на темы с сообщениями пользователей), после чего запускал сканер сайтов. Собирались ссылки имеющие заданный параметр, добавлял их к списку ссылок для парсинга, указывал требуемые границы и запускал сам парсинг. После чего уже получал искомый контент.

    Я пытаюсь понять, почему сканер сайта не находит ни одной ссылки по фильтру sendmessage.php?do=mailmember&u= хотя я залогинился на форуме из интерфейса программы.

    З.Ы. Похоже вышеуказанный алгоритм действий (для сбора форумных постов) не подходит для сбора емейлов. А как правильно это делать, не могу найти.
     
    eurohunter, Jul 30, 2014
    #14
  15. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Likes Received:
    596
    потому что каждый сайт нужно настраивать индивидуально.
    Но общие принципы у вас есть, так что пробуйте.
     
    Kreol, Jul 30, 2014
    #15
  16. eurohunter

    eurohunter New Member Пользователи

    Joined:
    Jul 29, 2014
    Messages:
    7
    Likes Received:
    0
    Вот и пробую, но не получается, и не понимаю, где в этом случае моя ошибка)
     
    eurohunter, Jul 30, 2014
    #16
  17. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Likes Received:
    3,485
    В моем проекте просто перебор анкет по их номеру. Изучите хелп, поймите, как работает программа и применяйте навыки к определенным сайтам... Чудес не бывает, нужно пробовать, работать...
     
    Root, Jul 30, 2014
    #17
Similar Threads
  1. ergoline

    парсинг форума.

    ergoline, Jul 3, 2013, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    1
    Views:
    2,107
    ergoline
    Jul 9, 2013
  2. vavera4ka

    Парсинг пользователей и их сообщений с форума.

    vavera4ka, Sep 8, 2013, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    1
    Views:
    1,869
    kagorec
    Sep 8, 2013
  3. vavera4ka

    Парсинг ссылок с форума, строго с определенной ветки.

    vavera4ka, Sep 9, 2013, in forum: Парсинг во вкладке "Ссылки"
    Replies:
    11
    Views:
    3,813
    vavera4ka
    Sep 20, 2013
  4. andreich777

    Парсинг e-mail адресов с форума на битриксе

    andreich777, Jul 16, 2014, in forum: Решение различных задач по парсингу
    Replies:
    10
    Views:
    1,712
    andreich777
    Jul 17, 2014
  5. Luk

    Парсинг форума

    Luk, Jan 11, 2015, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    1
    Views:
    1,320
    Root
    Jan 11, 2015
Loading...

Share This Page