Как спарсить ссылку на странице и положить ее в переменную.

[lesssss81]

Здравствуйте.
Подскажите, как брать из списка сайтов определенный урл. Чтобы разделить список сайтов с существующей ссылкой и без нее
например

Просмотр профиля: nedug156921 - Недуг.Ру

ссылка http://belweder.ru/catalog/guby/balzamy-dlya-gub/ в "домашняя страница", а http://ds2.edu.sbor.net/user/viacheslapn/ та же ссылка просто урл.
Есть с https, есть без https/

 

[Astraport]

Умеют же люди понятные вопросы задавать...

 

[todayer]

Подскажите, как брать из списка сайтов определенный урл

Если движки разные и нужно проверить на наличие разных урлов, то придется писать регулярки для каждого сайта. Если нужно проверять на наличие одного конкретного урла, то проще это сделать через screaming frog seo spider пакетно в режиме листа.

 

[lesssss81]

Движки разные.
Ну да трудновато конечно.

 

[todayer]

Ну да трудновато конечно.

ссылка, наличие которой надо проверить, тоже разной бывает?

 

[Roman48]

Ссылка начинается с belweder.ru, а после ссылки всегда " или двоеточие со слешем.
Если линки разные, создать списки, или один список

 

[lesssss81]

Ссылка будет меняться постоянно, например 100 сайтов, надо проверить есть ли ссылка конкретная, потом на след день другую ссылку посмотреть тоже в списке сайтов.

 

[lesssss81]

Ссылка начинается с belweder.ru, а после ссылки всегда " или двоеточие со слешем

В конкретном примере belweder.ru, не только главная есть и внутренние

 

[todayer]

надо проверить есть ли ссылка конкретная, потом на след день другую ссылку посмотреть тоже в списке сайтов.

Ну так проще. Через screaming frog, там создается фильтр и проверяется наличие в режиме листа. На следующий день другой фильтр, их менять 5 секунд.

 

[Roman48]

В конкретном примере belweder.ru, не только главная есть и внутренние

А зачем всю ссылку проверять? Достаточно знать что есть belweder.ru, если она удалена, то удалена, менять ее не кто ни будет.

 

[lesssss81]

Ну так проще. Через screaming frog, там создается фильтр и проверяется наличие в режиме листа. На следующий день другой фильтр, их менять 5 секунд.

в screaming frog какой именно для этого инструмент, будет он список делить на с наличием ссылки и без ссылки?

 

[lesssss81]

А зачем всю ссылку проверять? Достаточно знать что есть belweder.ru, если она удалена, то удалена, менять ее не кто ни будет.
Посмотреть вложение 85154

бывает ссылка некорректно встанет, не полностью, например http://belweder.ru/catal, если только по домену, то ссылку увидит, в полный адрес нет.

 

[Roman48]

Купи лучше на miralinks.ru там есть сайты, которые принимают в одной статье два и даже три разные ссылки, допустим одна статья и три разные ссылки, можно скинуться. есть сайты по 700 тысяч в сутки трафа и статья вечная 700р. чем эти гс собирать

 

[Roman48]

Удобный выбор) Ты думаешь от них толк будет, это если только услуги на кворке оказывать

 

[lesssss81]

Купи лучше на miralinks.ru там есть сайты, которые принимают в одной статье два и даже три разные ссылки, допустим одна статья и три разные ссылки, можно скинуться. есть сайты по 700 тысяч в сутки трафа и статья вечная 700р. чем эти гс собирать

Спасибо, посмотрю.

 

[Roman48]

Спасибо, посмотрю.

С 25 числа этого месяца, можем скинуться, на один два сайта, это минус половина, если хочешь напиши мне потом.

 

[lesssss81]

И что то застопорилось))
Как спарсить нужную мне ссылку7 Если получилось, до в положить в список "есть ссылка", если нет, то в список "нет ссылки"

 

[Roman48]

Гет запросом, без браузера лучше, дальше логикой if, браузером очень долго.

 

[lesssss81]

парсить страницу можно))

 

[todayer]

в screaming frog какой именно для этого инструмент, будет он список делить на с наличием ссылки и без ссылки?

Будет делить.
Установка фильтра

Сам фильтр

Режим лист

 

[lesssss81]

Спасибо))