Нужен бот для сбора URL и цен с интернет-магазинов

[andrej888]

Добрый день!
Вот общее описание того что нужно:
Необходимо сделать бот, который делает следующее:
Заходит на указанный сайт, находит на нем товар с заданным названием (например через функцию поиска или как то еще) и копирует URL этого товара, а так же название, цену и фото.
URL , название, цену и фото он заносит в таблицу Excel напротив того названия, по которому осуществлялся поиск. Если товара с таким именем не найдено - ставит слово "нет" в таблице напротив этого имени. Фото нужно для того, что бы потом "глазами" сопоставить соответствие товару.
Пройдя по одному сайту, берет другой сайт и просматривает его, и так же заносит в таблицу эти данные, только в соседние колонки. Количество сайтов для парсинга - неограниченно.
Параметры отбора:

1. название
2. производитель
3. показатель состава (т.к. на сайтах это может называться по разному)

Необходима возможность переключить бот в другой режим: парсить цены по собранным URL. Урлы он берет из таблицы и напротив каждого проставляет спаршенную цену.
Шаблон необходим в открытом виде.
____________________________________________________________
Интересует стоимость, и сроки исполнения

 

[Шива]

800 000 рублей и то если парсить только рунет и то только самые крупные магазины.

 

[LiMe]

Вы составьте список магазинов которые вы хотите обрабатывать, иначе дела не будет. Вы хотите все и сразу, а так не бывает. Даже не представляю возможно ли сделать универсальный парсер магазинов, как определять что это магазин, как шаблон должен понять что картинка относится именно к товару, а не логотип это к примеру, как "универсально" искать цену. Так что лучше прислушайтесь и соберите список нужных вам сайтов.

 

[andrej888]

ННаверное не совсем поняли: есть конкретный список, например из 15 магазинов, у каждого можно изначально задать признаки, где в коде располагается цена, фото, название, свойство. И по этим данным через поиск пройтись по каждому магазину по порядку.аверное не совсем поняли: есть конкретный список, например из 15 магазинов, у каждого можно изначально задать признаки, где в коде располагается цена, фото, название, свойство. И по этим данным через поиск сначала

 

[andrej888]

Т.е. понятно, что будут конкретные магазины. Но тут что важно, что бы потом можно было взять другой магазин, внести другие признаки и уже по другому магазину провести парсинг.

 

[Шива]

Т.е. понятно, что будут конкретные магазины. Но тут что важно, что бы потом можно было взять другой магазин, внести другие признаки и уже по другому магазину провести парсинг.

Для таких целей уже есть готовый софт. Если интересен шаблон и бюджет ≥ 300$ то пишите в телеграмм @ShivaTrimur

 

[Mikhail B.]

внести другие признаки

Теоретически, если будете свои регулярки подставлять то можно. Но ведь, у каждого сайта свое меню, страницы, ссылки. Сделать что-то универсальное это очень завтратно и не оправдано. Лучше и удобнее написать простой парсер под каждый магазин конкретно.

 

[zortexx]

15 магазинов. Прикинем, что приблизительная цена шаблона $100 за каждый магазин. Поскольку могут попасться как простые, так и сложные варианты защит от парсинга, включая динамические фейковые цены и прочие варианты подмены страницы при обнаружении парсинга.
Так что, в случае с зенкой, даже с 50% скидкой цена за подобный комбайн не может быть ниже $750 за шаблоны закрытые от редактирования..

 

[andrej888]

Ну что могу сказать, всем кому хотелось обсудить - обсудили, всем кому реально интересен проект - постучались в личку для того что бы уточнить детали.

 

[Шива]

Ну что могу сказать, всем кому хотелось обсудить - обсудили, всем кому реально интересен проект - постучались в личку для того что бы уточнить детали.

Для того что бы обсуждать детали нужны какие то контактные данные так как не все могут писать в личку.

 

[andrej888]

Для того что бы обсуждать детали нужны какие то контактные данные так как не все могут писать в личку.

Согласен. Вот мой скайп: baselic Интересен функционал Вашего готового софта.