Приветствую.
Недавно начал использовать софт по надобности парсинга сайтов.
Столкнулся с проблемой парсинга довольно большого сайта bidfax.info.
Уникальность работы с сайтом:
1. При переходе на сайт обходить капчу от Cloudflare
2. Каждый тип автомобилей ограничен 100 страницами, нужно выбирать конкретную сортировку:
- бренд авто
- модель авто
- год выпуска
И по каждому году, каждой модели, каждого авто проходиться по страницам и собирать ссылки на страницу с автомобилем.
После сбора всех ссылок проводить парсинг и сохранять всю информацию, включая фото автомобиля в таблицу.
Если есть ребята, кто готов сделать такой проект парсинга на заказ, буду рад обсудить стоимость.
Недавно начал использовать софт по надобности парсинга сайтов.
Столкнулся с проблемой парсинга довольно большого сайта bidfax.info.
Уникальность работы с сайтом:
1. При переходе на сайт обходить капчу от Cloudflare
2. Каждый тип автомобилей ограничен 100 страницами, нужно выбирать конкретную сортировку:
- бренд авто
- модель авто
- год выпуска
И по каждому году, каждой модели, каждого авто проходиться по страницам и собирать ссылки на страницу с автомобилем.
После сбора всех ссылок проводить парсинг и сохранять всю информацию, включая фото автомобиля в таблицу.
Если есть ребята, кто готов сделать такой проект парсинга на заказ, буду рад обсудить стоимость.