Парсер постов Twitter

[Hitachi]

Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.

 

[foast]

Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.

А сам текст твита сохраняется?

 

[Hitachi]

А сам текст твита сохраняется?

Нет, сохранение текста твита не предусмотрено

 

[foast]

Нет, сохранение текста твита не предусмотрено

а вам не сложно будет сделать сохранение текста твита?

 

[Hitachi]

а вам не сложно будет сделать сохранение текста твита?

Шаблон обновлён, добавлен парсинг текста твита

 

[Lexin]

Запускал шаблон и с прокси, и без них. Указывал ссылку в формате https://twitter.com/XXXX и просто ХХХХ, прогресс 0%. Лог пустой, ставил задачу спарсить 5 твитов, 2 результата нет. В чем может быть дело?

 

[Hitachi]

Запускал шаблон и с прокси, и без них. Указывал ссылку в формате https://twitter.com/XXXX и просто ХХХХ, прогресс 0%. Лог пустой, ставил задачу спарсить 5 твитов, 2 результата нет. В чем может быть дело?

Шаблон обновлён. Сейчас проблемы сохраняются, или всё работает?

 

[kuppyc]

Привет, прогонял шаблончик в ручную без прокси, в result ничего нет, актуален ли еще шаб ? Есть у кого работает ?

 

[Hitachi]

Привет, прогонял шаблончик в ручную без прокси, в result ничего нет, актуален ли еще шаб ? Есть у кого работает ?

Проверил сейчас, результаты сохраняются.
Какая версия ZP?

 

[kuppyc]

Проверил сейчас, результаты сохраняются.
Какая версия ZP?

все заработало после обновления до
5.40.00
Спасибо =)

 

[kuppyc]

Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?

 

[vrska]

Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?

Возможно, лимит для смертных 3200

 

[Hitachi]

Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?

Обновил шаблон, сейчас должен парсить больше постов.
Но в любом случае какое-то ограничение от твиттера есть, у меня на тестах сейчас раньше 4 февраля не подгружались посты

 

[kuppyc]

Обновил шаблон, сейчас должен парсить больше постов.
Но в любом случае какое-то ограничение от твиттера есть, у меня на тестах сейчас раньше 4 февраля не подгружались посты

Спасибо)

 

[AGAT]

Hitachi приветствую,
подскажи пожалуйста, шаблон рабочий?

 

[Sergodjan]

Сейчас проверял по надобности, шаблон отлично работает.

 

[igor777]

а хэштеги может мониторить?

 

[viktor382331]

/

 

[viktor382331]

Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.

а какой пароль от архива
?

 

[Sergodjan]

а какой пароль от архива
?

Архив без пароля.

 

[Kalashnikov081985]

Привет, недавно начал пользоваться этой программой. Не понимаю, что делать с парсером. Нужно помимо того файла, что ты дал, еще создать папки с инфой? подскажи пожалуйста

 

[KokaSEO]

Привет, недавно начал пользоваться этой программой. Не понимаю, что делать с парсером. Нужно помимо того файла, что ты дал, еще создать папки с инфой? подскажи пожалуйста

Вряд ли он подскажет

 

[Kalashnikov]

Вряд ли он подскажет
Посмотреть вложение 108436

жесть и шо делать, я сижу второй день разбираюсь, хер знает шо делать

 

[KokaSEO]

Осваивать прогу
Ну или нанимать разработчиков под свои задачи
В любом случае на минимальном уровне прогу лучше освоить, иначе даже с покупными шабами сложно будет

 

[KOPEECHKA.STORE]

Актуализировали шаблон

Полностью прокомментированный, с описанием и объяснением действий
Добавили работу с почтами KOPEECHKA.STORE


При возникновении вопросов обращайтесь в нашу техническую поддержку