Парсинг ВСЕХ друзей ВК. Вопрос.

[aboba]

Есть цель - спарсить друзей абсолютно всех пользователей ВК (не учитывая закрытые страницы). Есть идеи как это возможность сделать не потратив на это 15 лет? Буду рад любому совету, идее, или, возможно, готовой базе подобного добра

 

[Ezios]

aboba сказал(а):
Есть цель - спарсить друзей абсолютно всех пользователей ВК (не учитывая закрытые страницы). Есть идеи как это возможность сделать не потратив на это 15 лет? Буду рад любому совету, идее, или, возможно, готовой базе подобного добра

Ну для начала нужно знать че будем парсить ,только имя или вообще все данные на странице. От этого будет зависеть сколько времени потребуется на сбор .

 

[aboba]

Ezios сказал(а):
Ну для начала нужно знать че будем парсить ,только имя или вообще все данные на странице. От этого будет зависеть сколько времени потребуется на сбор .

Только ссылку на страницу + имя

 

[Arab14]

Так ты в таргетхантере регнись и запусти задачу,поставишь,там все на сервере и пусть парсит, за месяц может соберёт. А так уж трудоемкая задачи в плане объёма, по городам начни собирать, а то софт или скрипт отпадет и пару недель зря убил.

 

[aboba]

Arab14 сказал(а):
Так ты в таргетхантере регнись и запусти задачу,поставишь,там все на сервере и пусть парсит, за месяц может соберёт. А так уж трудоемкая задачи в плане объёма, по городам начни собирать, а то софт или скрипт отпадет и пару недель зря убил.

Не думаю что такие объемы можно спарсить на каких-либо сервисах, а на счет фильтров по городам, так в этом нету смысла, ибо нужны все страницы id1-id228228228

 

[Arab14]

7,2 млн страниц за минут 15) при этот отсортировать по возрасту,убрать блокнутых, и только из рф мужчин которые заходили за последние 3 дня. Сегодня собирал, после сортировки 350тыс осталось.