Не могу взять DOM модель

[ftalazol]

Приветствую, проблема в том что не могу спарсить список ссылок на посты ин аккаунта в инстаграм, открываю страницу, прокручиваю до конца что бы открылись все картинки с постами, далее хочу взять dom модель что бы оттуда спарсить все ссылки на посты, а в итоге в дум модели ссылок нету, там только шапка вроде как. причем если делать с помощью Парсить данные то он видит эти ссылки но спарсить все не получается.

Пробовал менять браузер с хрома на firefox все то же самое , раньше с таким не сталкивался. подскажите в чем может проблема быть.

 

[The_vAe]

Приветствую, проблема в том что не могу спарсить список ссылок на посты ин аккаунта в инстаграм, открываю страницу, прокручиваю до конца что бы открылись все картинки с постами, далее хочу взять dom модель что бы оттуда спарсить все ссылки на посты, а в итоге в дум модели ссылок нету, там только шапка вроде как. причем если делать с помощью Парсить данные то он видит эти ссылки но спарсить все не получается.

Пробовал менять браузер с хрома на firefox все то же самое , раньше с таким не сталкивался. подскажите в чем может проблема быть.

//div[contains(@style,"flex-direction: column")]//a[@tabindex="0"]

Спойлер: Пример кубика

 

[ftalazol]

Парсит 32 ссылки но там постов намного больше

 

[The_vAe]

Парсит 32 ссылки но там постов намного больше

Либо скиньте код страницы Dom через блокнот, либо напишите в телеграм, по удаленке посмотрю, что у вас там не выходит.

 

[ftalazol]

Вот дум страницы дурова например, но ссылки на посты я там не нахожу

Форум не дает добавить сюда код дум модели никак

 

[Sergodjan]

Парсит 32 ссылки но там постов намного больше

Как вариант, в цикле прокручивать страницу по-чуть-чуть и парсить этим кубиком (Парсить данные) в список, а по окончании цикла или при достижении конца страницы, удалить дубли из списка.

 

[Antonio Banderas]

Как вариант, в цикле прокручивать страницу по-чуть-чуть и парсить этим кубиком (Парсить данные) в список, а по окончании цикла или при достижении конца страницы, удалить дубли из списка.

Ограничение только нужно поставить, прокрутка в инсте бесконечная, - память течет.

 

[artur23]

а как быть если dom вообще не видится после загрузки страницы? Т.е. в первый раз загружаю страницу, dom есть, после перезагрузки страницы через определенное время - нет?