- Регистрация
- 28.12.2018
- Сообщения
- 732
- Благодарностей
- 343
- Баллы
- 63
Фриланс один из видов удаленной работы в интернете. Но в отличии от удаленной работы на определенную компанию на фрилансе постоянно нужно искать новые заказы, постоянно быть в курсе новинок и желательно хотя бы частично зарабатывать на арбитраже проектов.
Что возможно автоматизировать с помощью ZennoPoster:
1. Мониторинг новых заявок.
2. Поиск заказов на нескольких ресурсах одновременно.
3. Расширить источники для получения заказов: форумы и доски объявлений
4. Получение информации в удобном виде.
5. Взаимодействие с имеющимися инструментами. CRM системы.
6. Арбитраж заказов. Поиск исполнителей и автоматическая рассылка.
Возможности для автоматизации ничем не ограничены, например, возможно добавить автоматический ответ при появлении нового проекта.
Какие возможности ZennoPoster будут использованы:
1. Встроенный парсер
2. Проект в проекте
3. Списки, таблицы и работа с файлами
4. MySQL
5. HTTP запросы
Рассмотрим частично возможности, которые представляет зенопостер для автоматизации данного вида деятельности.
Приступаем к автоматизации. Находим новые заявки.
Для примера, получим новые заявки с freelance.ru
Находим страницу, где размещены новые проекты
https://freelance.ru/projects/filter/
Встроенные фильтры использовать не будем, хотя это возможно и достаточно легко реализуется через запись действий и/или сохранение настроенного профиля.
Для того чтобы определить, что проект может быть нам интересен, достаточно получить только заголовок проекта и ссылку, для детального ознакомления.
Описание и сумма обычно требует большого времени на ознакомление и изучение, чем беглый просмотр, поэтому их не собираем.
Встроенным инструментом «Парсить данные» находим текст названия заданий. Добавляем их в проект в виде списка.
Аналогично находим все ссылки на задания.
В ProjectMaker получаем примерно следующую структуру
Таким образом спарсили все заказы с этого сайта. Теперь перед нами две основные проблемы.
1) Как сохранить данные в удобном виде, для последующей обработки?
2) Как при следующем запуске получить только новые заказы, чтобы не просматривать повторно тоже самое, например при поднятии старого проекта?
Для дальнейшей обработки, нужно сохранить эти данные в виде массива или таблицы, поэтому начнем с самого простого, сохраним оба этих списка в виде xlsx таблицы.
Для этого создадим таблицу
и привяжем её к xlsx файлу, в папке нашего проекта
Теперь объединим два списка в виде таблицы. Через встроенные инструменты, это возможно сделать вот так способом:
Получаем первую строку списка с последующим удалением, для которых создаем переменные.
Далее, записываем результат в виде строки таблицы
Данное действие повторяем в цикле до тех пор, пока не закончатся данные в списках.
Для этого дополнительно создаем счетчик количества строк в одном из списков (списки одинаковые по размеру)
Повторяем действия в цикле с условием, пока счетчик строк не равен 0.
Аналогично, данную задачу возможно решить использую C# код и методы project.Lists, project.Tables, list.Count, table.AddRow
Успешно выполнив данный проект, получаем простую таблицу.
В excel уже возможно отфильтровать данные и найти что-то стоящее.
Каждый последующий запуск будет добавлять новые строки.
Автоматизируем дальше. Теперь нужно сделать так, чтобы добавлялось только новое.
При парсинге, мы всегда будем получать все результаты. Далее нужно удалить лишние, возможных алгоритмов достаточно много, например сравнение с уже имеющимся списком.
Например. Из имеющейся таблицы возьмем 2 столбец, где указан url адрес. Добавим его в отдельный список. После этого в этот список будем добавлять в уже имеющемся цикле ссылки, которые спарсили, удалять дубли, если размер списка изменился, добавлять в таблицу.
Возможно записать все в одну строку и сравнить хеши и т.п., но все эти действия сильно усложняют задачу. Существуют более простые способы, тем более у нас уже есть встроенный MySQL клиент.
Создаем базу данных и таблицу
Данные будем добавлять с помощью «INSERT IGNORE INTO …», поле url в таблице monitor, должно быть UNIQUE (уникальное поле).
Прописываем в ProjectMaker настройки для подключения и запрос. Кубик вставляем в цикл объединения в таблицу.
Результат выполнения
Сохранение в файл больше не требуется, можем убрать синхронизацию и привязку к физическому файлу на диске.
Создадим копию проекта через сохранить, как и вынесем метку проекта в переменную, для удобства редактирования. В экшене работа с таблицей изменим текстовую запись на значение переменной.
Теперь, мы можем добавить другие источники, всего лишь заменив первую часть, в которой производится сбор данных. Для примера, возьмем форум webmasters.ru
Нашли интересный для нас список тем
Заново добавили кубики парсера, но автоматическое назначение список изменили на List0 и List1, чтобы не переделывать код
Получили результат. Новые темы – последние в списке, при сортировке по уменьшению id всегда будут первыми.
Аналогично возможно проделать с любым сайтом.
CRM системы, обычно позволяют отправить данные POST запросом через API. Для отправки в данных можем использовать HTTP запросы.
Пример использования HTTP POST запроса, для передачи данных в CRM
Одним из способов запуска всех проектов является вариант проект в проекте.
Таким образом, мы можем добавить в настройки выбор, какие проекты нужно запустить сейчас, какие возможно позже.
Пример
Где найти исполнителя.
На многих сайтах есть каталоги исполнителей, например на freelance.ru
С данной страницы достаточно просто, возможно, спарсить email исполнителя
Далее сделать отправку сообщения с помощью зенопостера, например через веб интерфейс почты.
Что возможно автоматизировать с помощью ZennoPoster:
1. Мониторинг новых заявок.
2. Поиск заказов на нескольких ресурсах одновременно.
3. Расширить источники для получения заказов: форумы и доски объявлений
4. Получение информации в удобном виде.
5. Взаимодействие с имеющимися инструментами. CRM системы.
6. Арбитраж заказов. Поиск исполнителей и автоматическая рассылка.
Возможности для автоматизации ничем не ограничены, например, возможно добавить автоматический ответ при появлении нового проекта.
Какие возможности ZennoPoster будут использованы:
1. Встроенный парсер
2. Проект в проекте
3. Списки, таблицы и работа с файлами
4. MySQL
5. HTTP запросы
Рассмотрим частично возможности, которые представляет зенопостер для автоматизации данного вида деятельности.
Приступаем к автоматизации. Находим новые заявки.
Для примера, получим новые заявки с freelance.ru
Находим страницу, где размещены новые проекты
https://freelance.ru/projects/filter/
Встроенные фильтры использовать не будем, хотя это возможно и достаточно легко реализуется через запись действий и/или сохранение настроенного профиля.
Для того чтобы определить, что проект может быть нам интересен, достаточно получить только заголовок проекта и ссылку, для детального ознакомления.
Описание и сумма обычно требует большого времени на ознакомление и изучение, чем беглый просмотр, поэтому их не собираем.
Встроенным инструментом «Парсить данные» находим текст названия заданий. Добавляем их в проект в виде списка.
Аналогично находим все ссылки на задания.
В ProjectMaker получаем примерно следующую структуру
Таким образом спарсили все заказы с этого сайта. Теперь перед нами две основные проблемы.
1) Как сохранить данные в удобном виде, для последующей обработки?
2) Как при следующем запуске получить только новые заказы, чтобы не просматривать повторно тоже самое, например при поднятии старого проекта?
Для дальнейшей обработки, нужно сохранить эти данные в виде массива или таблицы, поэтому начнем с самого простого, сохраним оба этих списка в виде xlsx таблицы.
Для этого создадим таблицу
и привяжем её к xlsx файлу, в папке нашего проекта
Теперь объединим два списка в виде таблицы. Через встроенные инструменты, это возможно сделать вот так способом:
Получаем первую строку списка с последующим удалением, для которых создаем переменные.
Далее, записываем результат в виде строки таблицы
Данное действие повторяем в цикле до тех пор, пока не закончатся данные в списках.
Для этого дополнительно создаем счетчик количества строк в одном из списков (списки одинаковые по размеру)
Повторяем действия в цикле с условием, пока счетчик строк не равен 0.
Аналогично, данную задачу возможно решить использую C# код и методы project.Lists, project.Tables, list.Count, table.AddRow
Успешно выполнив данный проект, получаем простую таблицу.
В excel уже возможно отфильтровать данные и найти что-то стоящее.
Каждый последующий запуск будет добавлять новые строки.
Автоматизируем дальше. Теперь нужно сделать так, чтобы добавлялось только новое.
При парсинге, мы всегда будем получать все результаты. Далее нужно удалить лишние, возможных алгоритмов достаточно много, например сравнение с уже имеющимся списком.
Например. Из имеющейся таблицы возьмем 2 столбец, где указан url адрес. Добавим его в отдельный список. После этого в этот список будем добавлять в уже имеющемся цикле ссылки, которые спарсили, удалять дубли, если размер списка изменился, добавлять в таблицу.
Возможно записать все в одну строку и сравнить хеши и т.п., но все эти действия сильно усложняют задачу. Существуют более простые способы, тем более у нас уже есть встроенный MySQL клиент.
Создаем базу данных и таблицу
Данные будем добавлять с помощью «INSERT IGNORE INTO …», поле url в таблице monitor, должно быть UNIQUE (уникальное поле).
Прописываем в ProjectMaker настройки для подключения и запрос. Кубик вставляем в цикл объединения в таблицу.
Результат выполнения
Сохранение в файл больше не требуется, можем убрать синхронизацию и привязку к физическому файлу на диске.
Создадим копию проекта через сохранить, как и вынесем метку проекта в переменную, для удобства редактирования. В экшене работа с таблицей изменим текстовую запись на значение переменной.
Теперь, мы можем добавить другие источники, всего лишь заменив первую часть, в которой производится сбор данных. Для примера, возьмем форум webmasters.ru
Нашли интересный для нас список тем
Заново добавили кубики парсера, но автоматическое назначение список изменили на List0 и List1, чтобы не переделывать код
Получили результат. Новые темы – последние в списке, при сортировке по уменьшению id всегда будут первыми.
Аналогично возможно проделать с любым сайтом.
CRM системы, обычно позволяют отправить данные POST запросом через API. Для отправки в данных можем использовать HTTP запросы.
Пример использования HTTP POST запроса, для передачи данных в CRM
Одним из способов запуска всех проектов является вариант проект в проекте.
Таким образом, мы можем добавить в настройки выбор, какие проекты нужно запустить сейчас, какие возможно позже.
Пример
Где найти исполнителя.
На многих сайтах есть каталоги исполнителей, например на freelance.ru
С данной страницы достаточно просто, возможно, спарсить email исполнителя
Далее сделать отправку сообщения с помощью зенопостера, например через веб интерфейс почты.
- Тема статьи
- Другое
- Номер конкурса статей
- Одиннадцатый конкурс статей
Вложения
-
2,8 КБ Просмотры: 799
-
31,1 КБ Просмотры: 335
-
30,7 КБ Просмотры: 354
-
33,2 КБ Просмотры: 341
Для запуска проектов требуется программа ZennoPoster или ZennoDroid.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...
Для того чтобы запустить шаблон, откройте нужную программу. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.
Последнее редактирование: