Парсинг без браузера

Danya Balu

Client
Регистрация
28.09.2022
Сообщения
8
Благодарностей
1
Баллы
3
Здравствуйте, в общем пишу парсер авито, который берет ссылку и обновляет страницу пока не найдет новую запись, потом открывает ее и парсит в телеграм. Проблема в том, что все сделано с прогрузкой инстанса и занимает около 30 секунд на загрузку страниц. Уверен что можно сделать без загрузки браузера, просто получить HTML код страницы, найти новые элементы(записи), опять получить их HTML коды страниц, отпарсить в тг. Прощу помощи, изучаю Зенку всего месяц, если можете помочь, объясните на пальцах пожалуйста:bh:
 

Phoenix78

Client
Read only
Регистрация
06.11.2018
Сообщения
11 790
Благодарностей
5 710
Баллы
113
Ищи в ютубе уроки по работе с GET/POST запросами... ну и удачи в парсинге без браузера... там не все так однозначно, как просто получить HTML код страницы ... особенно на зенке, особенно с учетом защиты сайта от парсинга на запросах ;-)
 
  • Спасибо
Реакции: Danya Balu

Danya Balu

Client
Регистрация
28.09.2022
Сообщения
8
Благодарностей
1
Баллы
3
А как работают парсеры, которые обновляют каждую секунду страницу. Разве это возможно делать с браузером?
 

Phoenix78

Client
Read only
Регистрация
06.11.2018
Сообщения
11 790
Благодарностей
5 710
Баллы
113
А как работают парсеры, которые обновляют каждую секунду страницу. Разве это возможно делать с браузером?
что же такого происходит на этой странице, что ее надо обновлять каждую секунду ?
 

rastvl

Client
Команда форума
Регистрация
16.01.2019
Сообщения
656
Благодарностей
1 059
Баллы
93
  • Спасибо
Реакции: Phoenix78

Danya Balu

Client
Регистрация
28.09.2022
Сообщения
8
Благодарностей
1
Баллы
3
что же такого происходит на этой странице, что ее надо обновлять каждую секунду ?
Для перекупов каждая секунда на счету, особенно когда перепродаешь айфоны, там бешенная конкуренция в Москве, поэтому и берут таких ботов, которые ежесекундно обновляют страницу
 

Кто просматривает тему: (Всего: 2, Пользователи: 1, Гости: 1)