Парсинг Вконтакте

Все никак не могу разобраться как например получить список всех topic
учитывая, что отображается список по умолчанию неполным (скрывается с помощью JS)?
И как потом получить весь список страниц каждого топика (учитывая что он тоже скрыт) и последовательно в порядке хода страниц спарсить это в соответствующий файл данного топика и так для каждого топика?

Прошу расписать поподробней а еще лучшебы проект готовый с настройками, за него я даже готов доп заплатить если это так непросто.

 

Мне ктонибудь поможет?

 

Вот накидал примерчик. Парсит даже без авторизации, похоже, что контент теперь индексируется поисковиками.

 

Тоесть каждому топику вручную прописывать диапазон? мда...

 

Я вам показал примерный принцип парсинга топиков.
Вы можете собирать все топики и их страницы используя сканер сайтов на панели инструментов.

 

Вот проект, откройте на панели инструментов "сканер сайтов" и просто нажмите "начать/продолжить сканирование".

 

Вот еще немного доработал.