Парсинг изображений из Google картинок

[Slimper]

Santorini, приветствую!

Можно ли добавить к парсеру возможность собирать не только ссылки на картинки, но и юрл сайта источника, а также описание (сниппет) картинки?!

 

[Santorini]

Santorini, приветствую!

Можно ли добавить к парсеру возможность собирать не только ссылки на картинки, но и юрл сайта источника, а также описание (сниппет) картинки?!
Посмотреть вложение 71388

Хорошо, добавлю в ближайшее время

 

[Santorini]

Santorini, приветствую!

Можно ли добавить к парсеру возможность собирать не только ссылки на картинки, но и юрл сайта источника, а также описание (сниппет) картинки?!
Посмотреть вложение 71388

Добавил сохранение ссылки на сайт источник, а также текст описания. Скачать обновленный шаблон можно в первом посте

 

[khalilov.ulugbek]

Добрый день Santorini Программа работает очень медленно, 1 запрос с 10 картинками займет 2 минута. Так как я скачал бесплатную версию ZennoPoster и она не поддерживает прокси, скачиваю картинки без прокси, может поэтому у меня так медленно. Стоит ли купить программу. Спасибо заранее.

 

[Santorini]

Добрый день Santorini Программа работает очень медленно, 1 запрос с 10 картинками займет 2 минута. Так как я скачал бесплатную версию ZennoPoster и она не поддерживает прокси, скачиваю картинки без прокси, может поэтому у меня так медленно. Стоит ли купить программу. Спасибо заранее.

Доброе утро!
Скачивать можно и без прокси. Если вам не нужно больше 100 картинок по одному запросу, перенесите стрелку, как показано на картинке под спойлером, должно работать быстрее

Спойлер: Пример

 

[khalilov.ulugbek]

Добавил сохранение ссылки на сайт источник, а также текст описания. Скачать обновленный шаблон можно в первом посте

Сейчас название рисунка может быть либо порядковое число либо оригинальные название. Было бы очень удобно если добавите опцию название как текст описания который google показывает

 

[maximus83]

Здравствуйте. Можно скачать картинки определённого сайта и ссылку на страницу с которой она скачена и занести это в excel? Если можно напишите пожалуйста в личку цену данной работы. Картинок порядка 800.

 

[Kontaktor]

Здравствуйте!
Скажите, а можно какой-нибудь чекбокс что-ли приделать, чтобы можно было выбирать картинки с лицензией Creative Commons?

 

[Santorini]

Здравствуйте. Можно скачать картинки определённого сайта и ссылку на страницу с которой она скачена и занести это в excel? Если можно напишите пожалуйста в личку цену данной работы. Картинок порядка 800.

Шаблон обновлен, добавлена возможность поиска на определенном сайте (например, sfmoma.org) или по домену (например, .edu, .org или .gov).
Также сохраняется прямая ссылка на картинку, ссылка на страницу сайта, описание картинки, в файл формата csv

Здравствуйте!
Скажите, а можно какой-нибудь чекбокс что-ли приделать, чтобы можно было выбирать картинки с лицензией Creative Commons?

Добавлена возможность выбора страны поиска и прав на использование

Полный список изменений:

• добавлена возможность выбора типа поиска, по запросу или по сайту
• добавлена возможность выбрать страну поиска и права на использование
• добавлена проверка работоспособности прокси перед началом работы
• обновлены входящие настройки шаблона
• обновлена структура шаблона
• обновлены комментарии для кубиков и сообщения, которые выводятся в лог
• другие мелкие изменения

 

[QWER-MAS]

Шаблон обновлен, добавлена возможность поиска на определенном сайте (например, sfmoma.org) или по домену (например, .edu, .org или .gov).
Также сохраняется прямая ссылка на картинку, ссылка на страницу сайта, описание картинки, в файл формата csv

Добавлена возможность выбора страны поиска и прав на использование

Полный список изменений:

• добавлена возможность выбора типа поиска, по запросу или по сайту
• добавлена возможность выбрать страну поиска и права на использование
• добавлена проверка работоспособности прокси перед началом работы
• обновлены входящие настройки шаблона
• обновлена структура шаблона
• обновлены комментарии для кубиков и сообщения, которые выводятся в лог
• другие мелкие изменения

Было бы круто еще добавить поиск по картинке.
В список закинуть урли на картинки и по ним искать.

 

[Роман Михайлов]

Всем добрый день! Есть у кого-нибудь рабочая версия? Пишет не удалось выполнить проект. Наверно из-за окна с принятием условий гугла.

 

[JanCarlo]

Шаблон обновлен, добавлена возможность поиска на определенном сайте (например, sfmoma.org) или по домену (например, .edu, .org или .gov).
Также сохраняется прямая ссылка на картинку, ссылка на страницу сайта, описание картинки, в файл формата csv

Добавлена возможность выбора страны поиска и прав на использование

Полный список изменений:

• добавлена возможность выбора типа поиска, по запросу или по сайту
• добавлена возможность выбрать страну поиска и права на использование
• добавлена проверка работоспособности прокси перед началом работы
• обновлены входящие настройки шаблона
• обновлена структура шаблона
• обновлены комментарии для кубиков и сообщения, которые выводятся в лог
• другие мелкие изменения

Добрый день!

Скажите пожалуйста, есть ли возможность пофиксить шаблон?

Заранее спасибо!

 

[vipetr]

Скажите пожалуйста, есть ли возможность пофиксить шаблон?

попробуйте, поправил регулярку, должно работать

 

[ammagama]

А можно пароль к последнему архиву?

 

[Alex91]

А можно пароль к последнему архиву?

Там нет паролей и это не архив. Это шаблон.

 

[S10n4eg]

Здравствуйте, а может кто-то подскажет как отключить трафик монитор в этом шаблоне после выполнения? Сделал проект в проекте отправляю запрос первый, собрал что нужно. Когда второй запрос проходит шаблон то подтягиваются юрлы на картинки с предыдущего, ставил instance.UseTrafficMonitoring = false; не помогло

 

[Sergodjan]

Здравствуйте, а может кто-то подскажет как отключить трафик монитор в этом шаблоне после выполнения? Сделал проект в проекте отправляю запрос первый, собрал что нужно. Когда второй запрос проходит шаблон то подтягиваются юрлы на картинки с предыдущего, ставил instance.UseTrafficMonitoring = false; не помогло

Добрый день.
При работе с трафиком по умолчанию стек трафика должен чиститься автоматом.
Попробуйте сделать любой запрос на трафик и весь стек очистится.
После этого уже снова выполните поиск изображений и работайте с трафиком.