Помогите с парсингом!

Romanich1997

Новичок
Регистрация
05.05.2021
Сообщения
3
Благодарностей
0
Баллы
1
Всем привет,помогите пожалуйста разобраться с парсингом.

Есть страница с никами пользователей,паршу их через DOM и регулярку,НО,парсятся только те логины,которые видны на странице,чтобы спарсить остальных надо делать скролл мыши вниз,чтобы они подгрузились.

Так вот,как заполучить весь код страницы,чтобы спарсить всех и не скролить постоянно мышкой вниз.?
 

radv

Client
Регистрация
11.05.2015
Сообщения
3 778
Благодарностей
1 944
Баллы
113
Так вот,как заполучить весь код страницы,чтобы спарсить всех и не скролить постоянно мышкой вниз.?
Сначала прокрутить до конца страницы, а потом парсить ). Вместо регулярок, лучше использовать xpath (есть статьи на форуме)
Делать проверку дубликатов.
 
  • Спасибо
Реакции: Romanich1997

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)