Открыто

MonsterParser2Gis - многопоточный парсер 2 гис + доп. парсер Email (работает на API) Доступ навсегда

Тема в разделе "Бизнес и свое дело", создана пользователем zennomonster, 18 янв 2019.

Цена: 1900р.
Взнос: 1900р.

Основной список: 11 участников

Резервный список: 9 участников

Статус обсуждения:
Комментирование ограничено.
  1. 18 янв 2019
    #1
    zennomonster
    zennomonster ЧКЧлен клуба

    MonsterParser2Gis - многопоточный парсер 2 гис + доп. парсер Email (работает на API) Доступ навсегда

    [​IMG]
    Всем привет! Представляю Вашему вниманию парсер компаний с сайта 2Gis.

    Парсер работает по API в многопоточном режиме. Работает очень быстро, не требует прокси для работы

    По просьбам участников форума изменил условия, теперь доступ выписывается навсегда, без ограничений по времени. Все обновления и улучшения скрипта - бесплатно!

    Уникальность парсера в том, что он собирает данные не только с 2Gis.

    Дело в том, что 2 гис показывает далеко не все Email адреса компаний, которые там размещены. Этот парсер собирает все данные, которые есть в дубль гис + собирает Email адреса с каталога jsprav.ru и если Email адреса нет в обоих каталогах, парсер делает запросы на сайт компании, и если на главной странице или на странице контактов указан Email, парсер получает его и сохраняет в базу.​

    Таким образом парсер собирает максимальное количество Email адресов компаний, которое возможно.

    [​IMG]

    Кроме того, есть функция, которая делает запрос на сайт rusprofile.ru и получает ФИО директора компании, на которого она оформлена. ФИО удаётся получить не часто, т.к. бывает что есть несколько компаний с одним названием и определить какая именно компания нам нужна не возможно. Но где это возможно и компания с таким названием в регионе одна, парсер берёт ФИО директора и сохраняет в базу.

    [​IMG] Парсинг всех данных с 2Gis
    [​IMG] Дополнительный парсинг Email с каталога jsprav.ru
    [​IMG] Дополнительный парсинг Email с сайта компании
    [​IMG] Парсинг ФИО каталога rusprofile.ru

    Все данные сохраняются в Excel таблицу в удобном для работы виде:

    [​IMG]

    [​IMG] Название компании
    [​IMG] Рубрика
    [​IMG] Город
    [​IMG] Адрес
    [​IMG] Email адреса
    [​IMG] Телефоны
    [​IMG] ФИО директора
    [​IMG] ВКонтакте
    [​IMG] Facebook
    [​IMG] Instagram
    [​IMG] Twitter
    [​IMG] Сайт компании
    [​IMG] YouTube
    [​IMG] Одноклассники
    [​IMG] Количество филиалов
    [​IMG] ID компании
    [​IMG] Широта
    [​IMG] Долгота

    Цена 1900 руб. с человека.

    Доступ выписывается навсегда

    Все обновления и улучшения программы, а так же техническая поддержка бесплатно!

    На форуме буду регулярно. Веду этот проект и несколько других. В случае каких то изменений в 2гис буду оперативно обновлять скрипт и поддерживать его актуальность

    Бонус:
    - Всем за рекламу в рамках правил (4 поста в смежных темах либо ссылка в подписи) будет увеличено количество потоков, что увеличит скорость парсинга.
    В стандартной версии максимальное количество потоков - 10.
    В бонусной версии - 20 потоков.
     
    Последнее редактирование модератором: 19 янв 2019
    3 пользователям это понравилось.
  2. Последние события

    1. Ufalab
      Ufalab не участвует.
      23 апр 2024
    2. dimkadoma
      dimkadoma не участвует.
      30 июн 2023
    3. artoff
      artoff не участвует.
      27 июн 2022
    4. evaio
      evaio не участвует.
      4 июл 2021
  3. Обсуждение
  4. 18 янв 2019
    #2
    InoGram
    InoGram ЧКЧлен клуба
    Вот, другое дело, молодцом, прислушался к нашим просьбам ...
    Хоть я и купил другой парсер, твой тоже возьму.
     
    4 пользователям это понравилось.
  5. 19 янв 2019
    #3
    Хэнк Муди
    Хэнк Муди ОргОрганизатор
    С удовольствием взял бы на проверку
     
  6. 20 янв 2019
    #4
    skladchikum
    skladchikum ЧКЧлен клуба
    Поставил в подпись
     
    1 человеку нравится это.
  7. 20 янв 2019
    #5
    zennomonster
    zennomonster ЧКЧлен клуба
    Отметил. Записаться не забудьте ;)
     
  8. 20 янв 2019
    #6
    InoGram
    InoGram ЧКЧлен клуба
    @zennomonster как специалист, скажите, в 2gis после НГ менялось что то на сайте?
     
  9. 21 янв 2019
    #7
    InoGram
    InoGram ЧКЧлен клуба
    @zennomonster при каких условиях стартуем?
     
  10. 21 янв 2019
    #8
    mironoff
    mironoff ДолжникДолжник
    Поставил в подпись.
     
    1 человеку нравится это.
  11. 21 янв 2019
    #9
    OrangeCat
    OrangeCat ОргОрганизатор
    Поставил в подпись.
     
    1 человеку нравится это.
  12. 23 янв 2019
    #10
    zennomonster
    zennomonster ЧКЧлен клуба
    Всем привет!

    В плане парсинга особо ничего не поменялось

    При наборе 20 участников складчины
     
  13. 23 янв 2019
    #11
    Vaultboy
    Vaultboy ЧКЧлен клуба
    сколько по времени парсит полную базу в 10/20 потоков?
     
  14. 24 янв 2019
    #12
    smillionov
    smillionov СкладчикСкладчик
    Привет, подскажи пожалуйста Как старт планируется ; от кол-ва чел в складке или на какую то дату будет сбор?
    + еще нужен проверяющий и орг...
    - по времени наверное долго собираться будем
     
  15. 24 янв 2019
    #13
    Vadim321
    Vadim321 ЧКЧлен клуба
    В подписи!
     
    1 человеку нравится это.
  16. 24 янв 2019
    #14
    zennomonster
    zennomonster ЧКЧлен клуба
    Привет! Складчина стартует при наборе 20 участников. Меньше чем за неделю собралось 10 участников... Так что я думаю скоро начнём
     
    1 человеку нравится это.
  17. 25 янв 2019
    #15
    ihorhran
    ihorhran ЧКЧлен клуба
    есть ли поиск по Львову, Украина, на сколько детальный поиск по Львову?
     
  18. 26 янв 2019
    #16
    OrangeCat
    OrangeCat ОргОрганизатор
    А до какого кол-ва ждать будем? Вижу новых особо не добавляется (
     
  19. 27 янв 2019
    #17
    zennomonster
    zennomonster ЧКЧлен клуба
    Уже нашёл проверяющих. Отдаю на проверку, ждём отзывы в ближайшие несколько дней и запускаемся. Не будем ждать больше людей.
     
    4 пользователям это понравилось.
  20. 6 фев 2019
    #18
    InoGram
    InoGram ЧКЧлен клуба
    Когда начнём? Думаю надо прорекламировать
     
  21. 10 фев 2019
    #19
    InoGram
    InoGram ЧКЧлен клуба
    Ребят, давайте автору поможем и прорекламируем и пофиК член ты или не член.
    Реально за эти деньги+вечная лицензия=получается шикарный подарок
     
    1 человеку нравится это.
  22. 10 фев 2019
    #20
    Bro777
    Bro777 ЧКЧлен клуба
    В подписи
     
    1 человеку нравится это.
Статус обсуждения:
Комментирование ограничено.

Поделиться этой страницей