Главное Свежее   Проекты
Рекомендуем
Продвинуть свой проект
484 0 В избр. Сохранено
Авторизуйтесь
Вход с паролем

Выпускаем парсеры в Open Source

Бесплатные парсеры различных сайтов для платформы Diggernaut под MIT лицензией.

Начинаем выпускать парсеры для различных сайтов в нашем репозитории (с MIT лицензией).

Первыми будут выпущены парсеры моно- и мульти-брендовых зарубежных интернет-магазинов. В планах около 170 штук. Их примерный список приведен в репозитории, в readme файле.

Воспользоваться ими достаточно просто. Прочитайте внимательно описание в readme и следуя инструкциям создайте диггер, затем перенесите в него код нужного парсера.

Далее вы можете запустить парсер у нас в облаке, но примите во внимание, что для некоторых парсеров может потребоваться платная подписка, поскольку количество запросов страниц по ним может быть более 5000, что выходит за рамки бесплатного аккаунта. Так же вы можете скомпилировать парсер под одну из платформ: Windows, MacOS, Linux и запускать на своем компьютере или своем сервере совершенно бесплатно, вам нужен только бесплатный аккаунт в Diggernaut для того, чтобы компилировать парсеры.

Более подробно порядок действий для ряда парсеров описан в нашем блоге.

В дальнейшем планируем подготовить решения для ряда российских источников с открытыми данными. Если у вас есть какие-либо пожелания, мы с радостью их выслушаем.

Update 12.01.2018: добавлены 10 новых парсеров:

debshops.com, desigual.com, diesel.com, dior.com, donnakaran.com, dwell.co.uk, eddiebauer.com, eloquii.com, esteelauder.com, faithfullthebrand.com

Update 18.01.2018: добавлены 12 новых парсеров:

farfetch.com, ferragamo.com, footlocker.com, forever21.com, freepeople.com, gap.com, gapfactory.com, gentrynyc.com, gilt.com, global.tommy.com, guess.com, guessbymarciano.guess.com

Update 18.01.2018: добавлены 6 новых парсеров:

happysocks.com, hermanmiller.com, hermes.com, hm.com, hollisterco.com, hugoboss.com

+4
В избр. Сохранено
Авторизуйтесь
Вход с паролем
Комментарии
Первые Новые Популярные
Комментариев еще не оставлено
Выбрать файл
Блог проекта
Расскажите историю о создании или развитии проекта, поиске команды, проблемах и решениях
Написать
Личный блог
Продвигайте свои услуги или личный бренд через интересные кейсы и статьи
Написать