Парсинг сайта

  • Автор темы Автор темы x_tonic
  • Дата начала Дата начала

x_tonic

Client
Регистрация
24.11.2018
Сообщения
25
Реакции
2
Баллы
3
Встал перед следующей задачей:
Мне нужно спарсить сайт, собрал нужные ссылки но сайт не позволяет прямого доступа по ссылкам. Если ручками кликаю по ссылки то открывается новое окно, в котором находится информация.
Думал использовать экшен с табами, только проблема что все ссылки сделаны без последовательных параметров, не вижу за что можно зацепится чтоб пройти поочередно по ссылкам.
Подскажите как можно решить этот вопрос или где можно почитать про подход к таким задачам. Спасибо заранее.
 
Последнее редактирование модератором:
Встал перед следующей задачей:
Мне нужно спарсить сайт, собрал нужные ссылки но сайт не позволяет прямого доступа по ссылкам. Если ручками кликаю по ссылки то открывается новое окно, в котором находится информация.
Думал использовать экшен с табами, только проблема что все ссылки сделаны без последовательных параметров, не вижу за что можно зацепится чтоб пройти поочередно по ссылкам.
Подскажите как можно решить этот вопрос или где можно почитать про подход к таким задачам. Спасибо заранее.
Думаю, что без примера сайта и ссылок сложно будет что то подсказать.
 
А ты с пустым рефом кликаешь?
 
  • Оценить
Реакции: x_tonic
Нет. Но ты ошибку правильно вычислил. Спасибо.
Изначально ссылку не правильно в рефер прописал www.domain.ru/cgi-bin/bl_search.pl, после чего сайт капризничает.
При открытии ссылки через кубик используйте в поле "Referrer":
Код:
Развернуть Свернуть Копировать
{-Page.Url-}
Он передаст естественный реферер страницы, которая была до этого открыта в зенке.
 
ТС, случайно не дорвей парсите? )
 

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)