Парсинг изображений из Яндекс картинок

[Hitachi]

Запустил на 7.2.1, посыпались ошибки, так и не понял что не так
Посмотреть вложение 67924

Попробуйте в ProjectMaker запустить.
Если такая же ошибка будет, когда остановится на этом кубике, пришлите, что в переменной get_answer

 

[Hitachi]

Запустил на 7.2.1, посыпались ошибки, так и не понял что не так

Вот эту папку в настройках не меняли? "Путь к кукам и кэшу" которая

 

[Онегин]

Вот эту папку в настройках не меняли? "Путь к кукам и кэшу" которая

Проверил, всё как на скрине..

 

[Онегин]

Попробуйте в ProjectMaker запустить.
Если такая же ошибка будет, когда остановится на этом кубике, пришлите, что в переменной get_answer

В общем как всегда, я посыпался на моменте использования ProjectMakerа, не понимаю я как в нём всё настроить, куда запросы прописать, как изменить capmonster (у меня его нет) на рукаптчу и т.д..

 

[Hitachi]

В общем как всегда, я посыпался на моменте использования ProjectMakerа, не понимаю я как в нём всё настроить, куда запросы прописать, как изменить capmonster (у меня его нет) на рукаптчу и т.д..

Попробуйте вот этим шаблоном спарсить.
Если ошибка повторится - в папке Results сохранятся текстовые файлы с ответами на запросы.
Пришлите их потом сюда или в ЛС

 

[Andre70rus]

приветствую, скажите, а к функционалу можно еще прикрутить выбор размера в ручную, есть необходимость искать картинки по конкретному размеру?

 

[igor23.84.84]

Большое спасибо автору! Шаблон, то-что надо. Скачал, вписал поисковый запрос, запустил. Никаких проблем невозникло!!!

 

[Hitachi]

приветствую, скажите, а к функционалу можно еще прикрутить выбор размера в ручную, есть необходимость искать картинки по конкретному размеру?

Добрый день.
Имеете в виду в пикселях задавать размер конкретный?
В самом яндексе вроде как нет такого фильтра

 

[Andre70rus]

Добрый день.
Имеете в виду в пикселях задавать размер конкретный?
В самом яндексе вроде как нет такого фильтра

Плохо( а можно как то сделать что бы шаблон подгонял под заданные размеры при сохранении. Например я в настройках ставлю 1600х1200 он мне в этом размере сохраняет

 

[Hitachi]

Плохо( а можно как то сделать что бы шаблон подгонял под заданные размеры при сохранении. Например я в настройках ставлю 1600х1200 он мне в этом размере сохраняет

Это лучше отдельный шаблон написать или каким-нибудь софтом менять

 

[oscar777]

Здравствуйте. Подскажите пожалуйста как сделать, чтобы сохранялся в результатах название папки только запрос без ( _дата_время)

 

[Hitachi]

Здравствуйте. Подскажите пожалуйста как сделать, чтобы сохранялся в результатах название папки только запрос без ( _дата_время)

Добрый день.
Вот здесь оставить только {-Variable.text-}

 

[Valiksim]

Добрый день.
Имеете в виду в пикселях задавать размер конкретный?
В самом яндексе вроде как нет такого фильтра

Нет, думаю, имелось ввиду, чтобы он не парсил картинки меньше определённого количества киллобайт.
Сейчас парсятся картинки любого размера, но, картинки размером меньше 50кб, это миниатюры с спичечный коробок и даже меньше. Их бы отсеять на уровне парсинга, было бы круто

 

[Denyer]

как это исправить?

 

[Valiksim]

Посмотреть вложение 70602

как это исправить?

Места на диске хватает для сохранения?

 

[Denyer]

Обновил версию зеннопостера до последней
ошибка сменилась на эту,

в инстанте так замерает

 

[Valiksim]

в инстанте так замерает

Отключи, он не нужен.
Может памяти не хватает?
В любом случае, проблема у тебя. Проверь настройки и т.д.

 

[AndyFox]

Обновил версию зеннопостера до последней
ошибка сменилась на эту,
Посмотреть вложение 70799
в инстанте так замерает
Посмотреть вложение 70800

а покажите свои настройки шаблона. Просто у меня завелся с полоборота - скачал настроил запустил. И все работает нормально

 

[lexx76]

Здравствуйте!
Тоже что-то не получается загрузить. В чем может быть проблема?

 

[lexx76]

Посмотрел по Инстансе, проходит по всем трем позициям, картинки не вытягивает, пишет, что не удалось спарсить ссылки на изображение, а парсинг изображений выполнен успешно, хотя никаких картинок не качнул:
BP10442960020 https://yadi.sk/i/KvkSKzAxksmzsg
BP10442960010
BP10652960020

Но если оставить настройки по дефолту, где прописана циферка 100 в "Сколько парсить?", начинает качать все подряд, то есть пытается выгрузить по 100 картинок по каждой позиции.

 

[lotus1707]

а что дает парсинг картинок? как заработать?

 

[lotus1707]

а что дает парсинг? заработать можно?

 

[Mixis]

что дает парсинг?

Не знаю как кто применят, я на свой сайт добавляю, к каждой новости по запросу. Да иногда чушь парсит, но в основном норм.

 

[lotus1707]

Не знаю как кто применят, я на свой сайт добавляю, к каждой новости по запросу. Да иногда чушь парсит, но в основном норм.Посмотреть вложение 73210Посмотреть вложение 73211

можно подробней? это связано с РСЯ?если так, то парсить, значит скликивать?

 

[Mixis]

это связано с РСЯ

Ну какое РСЯ, разве не видно что это сайт с музыкой? Как-то не сложилось парсить на PHP c Last.fm. , хотя от туда можно брать любую инфу об исполнителе (кроме самой музыки).

 

[SlavenTyz]

Что то файлы с изображениями перестали сохраняться

 

[antaresgold]

Спасибо автору за шаблон!
Парсер работает Хорошо!

Только из-за того, что яндекс при каждой загрузке выдает разные варианты кода, шаблон парсит через раз, нужно в кубике "Парсим ссылки в список" исправить регулярку, вот вроде как получилась универсальная: "(?<=img_href\D+)https://.*?\b\w+\b(?="|&|\?)"

Еще, у меня наверное из-за медленных проксей, не успевает прогружаться страница, особенно когда необходимо проскролить страницу несколько раз! Вылетала ошибка "Не удалось спарсить ссылки на изображения"!
Я, в кубик "Проверяем наличие картинок", добавил задержку 1-3 сек.
И еще несколько кубиков, для ожидания прогрузки страницы!

 

[alex_mgn]

Шаблон работает хорошо, когда стоит парсить 100 ссылок! Но когда ставлю меньше 100, то ничего не парсит. Уходит на "Не удалось спарсить ссылки на изображения"
Где капать?

 

[AGAT]

Hitachi
приветствую, подскажи пожалуйста:
1. куда вводить ключ от сервиса капчи?
2. на скрине ошибка - из-за чего она может быть?
3.как настроить путь сохранения картинок и ссылок?

 

[ks1989]

не пойму, входных настроек нет в проекте?