Get парсинг

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
Здравствуйте, делаю бота на один закрытый аукцион. (вход по логин/пасс).
Когда мой лот перебивают - позиция окрашивается в красный цвет, я в браузере парсю этот цвет и изменяю позицию. Проблема в том что в браузере иногда в режиме онлайн не отображаются реалии, и приходится перезагружать (обновлять) страницу - на это уходит - 10 сек. - что для меня много.

Вопрос - можно ли парсить get запросом (если да, то как) при том что страница закрыта без ввода логин/пасс.

вот regex - (?<=\ <strong\ id="YourLastBid-).*?(?="\ style="color:crimson">)
собирает номера позиций в список
в get-ах нуб, жду помощи, спасибо.
 

ZennoScript

Moderator
Регистрация
04.03.2011
Сообщения
4 450
Благодарностей
1 885
Баллы
113

backoff

Client
Регистрация
20.04.2015
Сообщения
6 052
Благодарностей
6 481
Баллы
113
Все можно парсить гетом, логика пока такая (без примера сайта):
1. логинишься
2. сохраняешь куки
3. гетишь с куками
4. парсишь результ
 

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
не получается гетить с куками, (сайт не пропускает).
хотя куки точно работают - проверил с нового потока, с помощью куков залогинился.
подставляю их в гет - выдаёт код формы логина, а не нужную страницу
 

backoff

Client
Регистрация
20.04.2015
Сообщения
6 052
Благодарностей
6 481
Баллы
113

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
в лс отписал
 

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
вопрос остаётся открытым, по поводу того как парсить на get с куками.
закрытые площадки
 

Adigen

Client
Регистрация
28.07.2014
Сообщения
825
Благодарностей
653
Баллы
93
вопрос остаётся открытым, по поводу того как парсить на get с куками.
закрытые площадки
Скорее всего нехватает какого-то заголовка в запросе.
Например аякс обычно идет с доп заголовком HTTP_X_REQUESTED_WITH
 

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
Да там на аяксе скорее всего! как заголовок подставить в ссылку? HTTP_X_REQUESTED_WITH://url - так?
 

ffeniks

Client
Регистрация
03.06.2016
Сообщения
312
Благодарностей
410
Баллы
63
backoff помог, спасибо.
 

Adigen

Client
Регистрация
28.07.2014
Сообщения
825
Благодарностей
653
Баллы
93
Да там на аяксе скорее всего! как заголовок подставить в ссылку? HTTP_X_REQUESTED_WITH://url - так?
Отснифайте оригинальный запрос, посмотрите заголовки, и сделайте такие-же.
 

Кто просматривает тему: (Всего: 3, Пользователи: 0, Гости: 3)