[В разработке] сайт для парсинга групп|пабликов

http://qweparser.blogspot.com/

Я решил сделать сайт для парсинга пабликов и групп, так как многим из вас, я уверен,
не хватает тех функций что есть в программах BoRzZoy.

Функционал вы можете увидеть на скриншоте:



Функционал

Фильтрация слов в названии групп/пабликов.

Например если мы ищем по слову "город", а в стоп слова напишем:
Питер, Москва
То паблики с таким названием не возьмет парсер и просто пропустит.
​

Сортировка

• 0 — сортировать по умолчанию (аналогично результатам поиска в полной версии сайта);
• 1 — сортировать по скорости роста;
• 2 — сортировать по отношению дневной посещаемости к количеству пользователей;
• 3 — сортировать по отношению количества лайков к количеству пользователей;
• 4 — сортировать по отношению количества комментариев к количеству пользователей;
• 5 — сортировать по отношению количества записей в обсуждениях к количеству пользователей.

Фильтрация по записи на стене

Парсер берет запись на стене (на скриншоте берет вторую). И проверяет сколько
на ней лайков/репостов/комментариев. Если она проходит все условия,
значит такая группа отправляется в поле результатов.

Авторизация
авторизация через токен, без ввода логина и пароля. То есть вам нужно будет
зайти через браузер на один аккаунт, перейти по ссылке, разрешить приложению доступ
к странице и скопировать на мой сайт токен который вам выдадут после этого.

*Токен находится между access_token= и &expires_in=

Скорость
скорость парсинга меньше чем в программах BoRzZoy, так как функций здесь
намного больше и соответственно придется обрабатывать больше информации. Но
одну группу оно обрабатывает как правило не более 1-2 секунд.
Стоимость
я не хочу делать этот сервис платным. Не из-за того что здесь нельзя продавать
похожий софт, а потому что просто не хочу. Но возможно, повторюсь, возможно, сайт
будет закрытым и я буду отправлять на него ссылку только проверенным людям. Но это вряд ли.
Рандомизация текста
Также я перенесу на этот сайт рандомизацию текста, чтобы не плодить много мелких
проектов.
Многопоточность
не знаю точно, но возможно сделаю многопоточность с помощью нескольких
аккаунтов. Тогда парсить будет намного быстрее.
Прокси
прокси поддерживаться не будут, трафик будет идти именно с вашего ip адреса, но не
все так плохо, можно добавить его в настройки вашего браузера, на время работы
парсера.

В теме пишите идеи и тд. Но лучше пишите сразу, чтобы я потом не переделывал все

del

Удачи+

А ещё было бы хорошо по странам.

Хорошо, сделаю

http://qweparser.blogspot.com/ можете начать пользоваться парсером, не работает фильтр по стоп словам в комментариях и полностью блок Статистика.

Скоро разберусь почему максимальное количество групп только ~100. Наверное проблемы с самим ВК

Потестил, всё ок.

UPDATE
Теперь на проверку количества пользователей в 1000 группах уходит секунда (раньше уходило 334 мс на одну только группу)
Добавлена возможность отсеивать группы по словам в названии.
Добавлена возможность проверки 1000 групп на открытую стену всего за секунду. (да да, секунду не на 1 группу, а на 1000 ). Но эти группы не отображаются без проверки поста, поэтому все равно будет уходить 334 мс на каждую.
Добавлена возможность выбора номера поста для проверки на количество лайков, репостов и комментариев.

Сообщение.

В связи с "тяжелым" отношением между администратором данного форума и мной, я не могу здесь больше продвигать свой парсер. Проект временно заморожен.

Клевый скрипт! Главное быстрый!