Парсер WildBerries. Или как узнать самые продаваемые товары на маркетплейсе.

[soprano]

Шаблон предназначен для сбора и анализа информации по заданной категории товаров с сайта Wildberries.ru.

Шаблон сделан на C#, данные сохраняются в таблицу Excel.

Шаблон собирает ссылки на новые товары в указанной категории:
ID товара
Ссылка на товар
Название товара
Цена на товар
Количество заказов
Рейтинг товара
Продавец
Остаток товара
Дата парсинга

Вы запускаете парсинг товара первый раз и шаблон собирает всю указанную информацию.

Затем, через некоторое время 12 или 24 часа, больше не стоит, запускаете шаблон снова и он собирает информацию по остаткам товара.
После шаблон вычисляет - сколько товара было продано за указанное время.

Последняя колонка как раз это значение.
Так можно быстро найти самый продаваемый новый товар в категории.


Настройки простые.
Сначала вводим ссылку на категорию и ставим чекбокс на Парсить ссылки

и запускаем шаблон.
Получаем список со ссылками

Затем снова в Настройки

Парсим данные 1-й раз и видим следующее

Затем через какое-то время получаем данные по продажам и делаем сравнение остатков:
Парсим второй раз

и сравниваем данные за два периода

Получается таблица, как на второй картинке сверху.

Перед началом работы вы можете очистить список со ссылками и таблицу с данными.

Шаблон парсит только категории, где нет дополнительных данных. Т.е., одежду и обувь, где требуется выбрать размер и цвет не спарсит.
Всё остальное - пожалуйста.

Ссылка на категорию должна быть типа

Купить интерактивные игрушки в интернет магазине WildBerries.ru

Большой выбор интерактивных игрушек в интернет-магазине WildBerries.ru. Бесплатная доставка и постоянные скидки!

www.wildberries.ru

Купить детская электроника в интернет магазине WildBerries.ru

Большой выбор детской электроники в интернет-магазине WildBerries.ru. Бесплатная доставка и постоянные скидки!

www.wildberries.ru

Из библиотек требуется HtmlAgilityPack, её добавляю. Все остальные встроены, их нужно добавить в GAC

using System.Xml.XPath;
using System.Net;
using System.Net.Http;
using System.Web;

 

[Zennovods]

что не шаблон - то годнота! благодарю!

 

[feyanax]

то что надо!

 

[Kokos]

вообще прям в тренд , спасибо !!!

 

[radv]

А если сюда привязать визуальное отображение аналитики из шаблона в соседней теме от Astraport будет вообще шикарный парсер с наглядными результатами.

 

[max_linder]

Интересный шаблон, но у меня не заработал. Файл links остается пустой после выполнения.

 

[soprano]

Сейчас гляну, поправлю если надо.

 

[soprano]

Поправил. В названии переменной ошибка была..

 

[Spelin]

Похожее из 6 конкурса: https://zennolab.com/discussion/thr...ska-prodavaemyx-tovarov-na-wildberries.83368/

 

[soprano]

Похожее из 6 конкурса: https://zennolab.com/discussion/thr...ska-prodavaemyx-tovarov-na-wildberries.83368/

Внимательнее посмотри, а потом сравнивай.

 

[Spelin]

Внимательнее посмотри, а потом сравнивай.

Не не, без обид. По заголовкам похожи. Сами шаблоны не смотрел.

 

[max_linder]

Поправил. В названии переменной ошибка была..

Спасибо, работает.

 

[Kokos]

автор отдельное спасибо за C#

 

[soprano]

автор отдельное спасибо за C#

Так и не смог освоить кубики...

 

[Astraport]

А если сюда привязать визуальное отображение аналитики из шаблона в соседней теме от @Astraport будет вообще шикарный парсер с наглядными результатами.

Ну я как раз так и делал. У меня был практически такой же шаблон, писал 1,5 года назад. Только я ещё заморочился со сбором и древовидным представлением подкатегорий, а их там очень много.
Кстати, так и не нашли применение этому шаблону WB) У продавцов там есть свои инструменты.

 

[bashka]

Ну я как раз так и делал. У меня был практически такой же шаблон, писал 1,5 года назад. Только я ещё заморочился со сбором и древовидным представлением подкатегорий, а их там очень много.
Кстати, так и не нашли применение этому шаблону WB) У продавцов там есть свои инструменты.

Насколько правдивые цифры о продажах дает вайлдбериз? Может это рекламный ход, для привлечения продавцов в их маркет.

Откуда вы берете такие шаблоны? У вас тут есть скрытый раздел что-ли с подробным описанием какие библиотеки использовать?
Например какую библиотеку использовать System.Net 3.5 или 4? System.Web 2 или 4 32 или 64?

 

[Astraport]

Насколько правдивые цифры о продажах дает вайлдбериз? Может это рекламный ход, для привлечения продавцов в их маркет.

Вполне может быть.

 

[serg1208]

Насколько правдивые цифры о продажах дает вайлдбериз? Может это рекламный ход, для привлечения продавцов в их маркет.

Откуда вы берете такие шаблоны? У вас тут есть скрытый раздел что-ли с подробным описанием какие библиотеки использовать?
Например какую библиотеку использовать System.Net 3.5 или 4? System.Web 2 или 4 32 или 64?

вот я тоже думаю, где они все скрывают

 

[Timofey]

При запуске шаблона выдает отсутствие библиотек, раньше такое не делал, можете подсказать последовательность?

 

[soprano]

При запуске шаблона выдает отсутствие библиотек, раньше такое не делал, можете подсказать последовательность?

А библиотеки есть в папке External Assemblies?
После обновления показало ошибку?

 

[Timofey]

А библиотеки есть в папке External Assemblies?

В папку External Assemblies я положил библиотеки из топика, ниже скрин.
Если нужно добавить другие, можете подсказать путь или сами файлы?

 

[soprano]

WebDriver.dll это можно удалить из using и GAC, это от Selenium осталось.
System.Web.Extensions есть в GAC, надо выбрать.

 

[Atarget]

WebDriver.dll это можно удалить из using и GAC, это от Selenium осталось.
System.Web.Extensions есть в GAC, надо выбрать.

Выдаёт вот это:

файлы кинул сюда:

Что не так делаю?

 

[soprano]

Выдаёт вот это:
Посмотреть вложение 74460

файлы кинул сюда:
Посмотреть вложение 74461

Что не так делаю?

Здесь ничего не могу сказать, если библиотеки добавлены в GAC и их не видно - тогда к разработчикам вопрос.

 

[ibred]

WebDriver.dll это можно удалить из using и GAC, это от Selenium осталось.
System.Web.Extensions есть в GAC, надо выбрать.

Удалите лишние библиотеки и перезалейте шаблон. Он должен запускаться без танцев с бубнами
Если в GAC выбираете либу, которая лежит в External Assemblies, её нужно тоже сюда загрузить, в частности Newtonsoft.Json.dll. System.Web.dll нужно добавлять из директории Windows, а не External Assemblies. Тогда у пользователей не будет таких ошибок.

 

[soprano]

Удалил лишнее, перезалил шаблон.

 

[guru]

Спасибо интересный шаблон!
Еще была бы возможность выставить количество страниц для анализа, а то не всегда надо ну прямо все.

 

[Belias]

А как можно запустить в несколько потоков? Или в один только работает?

 

[soprano]

А как можно запустить в несколько потоков? Или в один только работает?

Шаблон работает в один поток.

 

[baracuda]

Шаблон работает в один поток.

Какова скорость ?