⭐️ iProfiler.Pro – шаблон нагуливания/прогрева профилей и эмуляции трафика ⚡ (от LaGir и Moonwalker)

[Moonwalker]

У какого процента посетителей определяется пол-возраст? Сделайте скрин, пожалуйста.

День добрый. Извиняюсь за задержку с ответом, по семейным обстоятельствам пришлось уехать на несколько дней.
По полу/возрасту. В случае "чистых профилей", понятно, что данные тому же Яндексу брать неоткуда, поэтому ничего не засчитывается.
Проверил с залогиненным в Яндексе профилем, где указан возраст (основной момент для Яндекса, другие варианты только с очень большой историей профиля, по которым он может сам "решить", кто с этой стороны экрана). К сожалению, тоже не засчитывает.
Поставили для себя в ToDo лист, будем разбираться (в том числе, и в разных версиях и Зенки, и движков, и даже профилей). В общем, будем решать. Как решим, отпишусь.
ps. Если есть мысли и понимание, в чем именно может быть проблема, с радостью выслушаем

 

[Moonwalker]

Выпустили, наконец, шаблон для работы с реальной выдачей Яндекса - iProfiler.Яндекс
Садимся за Google, многим, оказывается, нужен ))

 

[Lextor]

а не удобней ли будет, для всех(и для авторов и для пользователей), если это изначально будет несколько разных продуктов ... а потом, можно их продавать оптом ... или собрать в один комбайн(как вариант, с возможностью отключения неоплаченного функционала) ... я бы, например, подождал и взял гулялку и кликалку по Гуглу ... Яндекс мне вообще не нужен, а придется платить 5К только за него ... как-то не очень) а кому-то, наоборот - нужен только Яндекс ... может сделать ценообразование более гибким, все таки?

поддерживаю

яндекс мне тоже вообще не нужен!!!!!!!!!!!!!

 

[profi88]

поддерживаю

яндекс мне тоже вообще не нужен!!!!!!!!!!!!!

поддерживаю

 

[Moonwalker]

Lextor profi88
Так вроде отказались уже от старой схемы, она только в комментах осталась ))) Так что, отдельные шабы будут.

 

[antyspama]

в шапке написано обнова з 20 г последняя. тоесть плюшки 7.3 по регистрации профилей не учтены?

 

[Moonwalker]

в шапке написано обнова з 20 г последняя. тоесть плюшки 7.3 по регистрации профилей не учтены?

Обновы после этого были, на днях планируется очередная, стартпост не обновили просто ))
Что касается новых профилей-папок, нет, пока их поддержку не добавляли (по ряду причин, в том числе, что никто из покупателей шаблона их пока не использует), но в ближайших планах есть, добавим.

 

[Moonwalker]

Поскольку вчера выкатили очередной обновление (да, шаблоны не заброшены, поддерживаются и развиваются ), актуализировал информацию в стартпосте (настройки и changelog).

Спойлер: Обновления версии 1.4.1

+ Улучшена логика механизма расширенной фильтрации ссылок
+ Добавлена возможность указывать аргументы запуска движка Chrome
+ Добавлена возможность включать опцию "Браузер без отображения содержимого" из входных настроек
+ Добавлен вывод Title посещаемой страницы в лог
+ Улучшена обработка попапов jivo
+ Добавлена возможность обхода неизвестных попапов и закрывающих элементов в тех случаях, когда они перекрывают ссылку для перехода (включить эту опцию можно во входных настройках)
+ Добавлено автозакрытие ряда видов попапов
+ Исправлена проблема с взятием недопустимых профилей в некоторых случаях
+ Добавлена возможность удаления обязательной ссылки из работы потока в случае, если по ней уже был совершён переход в рамках этого потока
+ Добавлено автоотключение ряда уведомлений от сайтов
+ Добавлены дополнительные логи в некоторых важных местах
+ Добавлена обработка страниц ошибок вида "chrome-error://chromewebdata/" (по аналогии с "about:blank")
+ Исправлена проблема с определением локальных ссылок при режиме игнора внешних в некоторых ситуациях
+ Исправлена обработка ссылок с "/goto/"
+ Исправлена проблема, при которой в некоторых случаях для отбора профилей могли использоваться уже взятые шаблоном
+ Добавлены правки для лучшей обработки профилей в многопотоке
+ Исправлен ряд проблем с папками логов
+ Добавлена возможность файловые логи по вкладке помещать в папку логов отладки
+ Добавлена возможность автоархивации логов
+ Исправлена проблема с вылетом и неправильной обработкой папок логов в случае взятия поврежденного профиля
+ Исправлена проблема с подгружаемыми переменными профиля в случае их наличия

 

[Moonwalker]

За последнее время вышло две новых версии.

Спойлер: iProfiler v1.4.3 (от 30.06.2021)

+ Добавлена возможность блокировки определённых HTTP-запросов при работе (политика содержимого)
+ На вкладку "Начало работы" добавлены настройки запуска иного шаблона
+ Исправлено отображение домашнего IP в логах там, где это быть не должно (чтобы не вносить путаницу). Также добавлены дополнительные проверки на домашний IP при эмуляции параметров, связанных с прокси.
+ Добавлена возможность перемещать уменьшенные копии профилей (если они есть) в отдельную папку, как и обычные профили при наличии настройки переноса
+ Добавлен ряд настроек что делать с профилем при обнаружении значимого уменьшения размеров профиля (допустимую величину уменьшения теперь тоже можно задавать)
+ Исправлено нелогичное место записи сообщения о файловых логов при включенной настройки сохранения файлов в папку с логами отладки
+ Поправлено отображение регионов прокси в логе на более логичные и понятные
+ При неудачном сохранении профиль теперь перемещается в отдельную папку (во избежание взятия его в работу снова)
+ Добавлена возможность захода на заданные URL перед началом работы (например, для получения кук антибот.cloud).

Спойлер: iProfiler v1.4.2 (от 09.06.2021)

+ Добавлена возможность указывать прокси в файле вместе со ссылками на ребут (т.е. для каждого прокси можно указывать свою ссылку на ребут в той же строке файла, формат можно выбрать в настройках)
+ Добавлена возможность выбирать когда выполнять ребут прокси (перед или после работы)
+ Улучшен блок проверки прокси
+ Добавлена возможность отключения смены прокси из источника
+ Исправлен момент с отсутствием возврата прокси в файл при смене прокси при работе, при соответствующих настройках

 

[Moonwalker]

Выпустили внеочередное обновление, в которое вошли последние изменения из шаблона iProfiler.Яндекс.

Спойлер: iProfiler v1.4.4 (от 13.07.2021)

+ Добавлена автозапись посещённых сайтов в переменную профиля
+ Добавлена возможность включать и отключать загрузку переменных из профиля в шаблон
+ Добавлена возможность выбора загружать инстанс до или после профиля
+ Добавлена возможность включать и отключать перенос профиля в другую папку при невозможности его сохранения

 

[Moonwalker]

Обновили оба шаблона, и текущий, и iProfiler,Яндекс.

Спойлер: iProfiler v. 1.5.0 (от 24.08.2021

Внесён ряд оптимизаций в работу с инстансами и профилями. Теперь шаблон выдает меньше соответствующих ошибок, ест меньше ресурсов и лучше работает в многопотоке. Если у кого были проблемы при запуске большого количество потоков - в этой версии ситуация должна быть значительно лучше.
Также, инстансы поднимаются теперь "в середине" работы шаблона, только на выполнение браузерной части. Иными словами, например, при 30 активных потоках нормально количество 10-20 активных инстансов на вкладке "Инстансы" (потоки без инстансов в такой момент находятся в начальных или конечных стадиях работы шаблона).

+ Добавлена вкладка "Действия на сайтах"
Теперь можно задавать действие клика или заполнения формы на сайтах по своим путям XPath. Для проверки работы своих путей XPath в папку вспомогательных шаблонов добавлен "Site Actions via XPaths.zp"
Важно! ZennoPoster на данный момент поддерживает только XPath первой версии. Соответственно, пути с синтаксисом XPath 2.0+ работать не будут!
+ Исправлена проблема с потерей корректного пути при нескольких перемещениях профиля (при соответствующих настройках и ситуациях)
+ Добавлены правки по проблеме "Не удалось перейти по ссылке из-за проблем с прокси"
+ Добавлены правки по кодировкам файлов (в некоторых ситуациях на некоторых системах могли возникать проблемы)
+ Исправлено игнорирование паузы перед работой
+ Оптимизированы блокировки потоков в шаблоне
+ Устранено ряд причин появления ошибок профилей и инстансов по типу "Error detected when getting cookie from instance", "Error occurs when applying profile to instance"
+ Исправлены вылеты инстансы при большом количестве потоков
+ Оптимизированы этапы поднятия инстанса и загрузки профиля
+ Исправлен возврат прокси без URL для перезагрузки при определённых настройках
+ Теперь ненужные вкладки закрываются при возврате в выдачу
+ Добавлена возможность автоудаления профилей сразу после работы
+ Добавлено отображение текущего PID (Process ID) в префиксах сообщений лога
+ Изменены некоторые дефолтные значений во входных настройках шаблона в связи с изменениями выше, выключены файловые логи по умолчанию

 

[Romulez]

Эмуляция активности в социальных сетях (работа с привязанными аккаунтами)

а вот интересно и хотелось бы чуть больше информации )
я так понимаю, под каждый профиль регистрируется аккаунт в соцсетях? это заранее нужно сделать, вручную??

 

[Moonwalker]

а вот интересно и хотелось бы чуть больше информации )
я так понимаю, под каждый профиль регистрируется аккаунт в соцсетях? это заранее нужно сделать, вручную??

Когда реализуем, тогда и будет больше информации )) Пока это в планах.
Но в целом, да, в профиль залогинивается аккаунт из соцсети. И дальше уже этот профиль гуляет, допустим, по ВК.

 

[Romulez]

Но в целом, да, в профиль залогинивается аккаунт из соцсети. И дальше уже этот профиль гуляет, допустим, по ВК.

просто листает странички? а как насчет лайков? или даже репостов? ))

 

[Moonwalker]

просто листает странички? а как насчет лайков? или даже репостов? ))

Еще раз говорю, это направление даже не в работе пока. Что и когда будет реализовано, говорить преждевременно. Шаблонов для работы непосредственно с ВК и так предостаточно. У нас несколько другие цели у шаблонов, поэтому, условно, повторять то, что уже и так есть и точно больше заточено под работу именно в соцсети, смысла особого нет.

 

[Moonwalker]

Вышло очередное обновление.

Спойлер: iProfiler v1.6.0 (от 09.09.2021)

+ Добавлена возможность выбирать путь сохранения файла profiles.txt, в котором хранится список профилей, которые находятся в работе в текущий момент. Данная настройка называется "Файл для контроля взятия профилей потоками"
+ Исправлена проблема с рядом опций в настройке "Приоритет при выборе профиля". Теперь профили по минимальным и максимальным значениям берутся корректно
+ Добавлена в настройки опция "бесконечное выполнение" (установка -1 к выполнениям) (вкладка "Общие настройки")
+ Добавлена возможность устанавливать свои пути XPath для закрытия попапов на сайтах (вкладка "Гулялка")
+ Улучшена логика получения прокси
+ Внесены правки по предварительным заходам на заданные в настройках URL, добавлены логи
+ (бета) Добавлена поддержка профиль-папок

 

[Moonwalker]

За последний месяц вышли сразу три обновления. Полный список изменений/дополнений/исправлений - ниже
(Шаблон для работы с поведенческими факторами в Яндексе тоже обновился).

Спойлер: iProfiler v1.8.0 (от 17.11.2021)

+ Оптимизирован и улучшен механизм взятия и фильтрации профилей. Теперь при больших объёмах профилей (от нескольких тысяч) шаблон подбирает подходящий значительно быстрее
+ Добавлена возможность указывать минимальный и максимальный размер профиля для взятия в работу (в килобайтах). На больших объёмах использовать с осторожностью - опция может замедлить взятие профилей в работу, в частности при включённой фильтрации взятия (по размеру или дате) и профилях-папках
+ Добавлена возможность отключать общий лог по выполнениям шаблона (MainLog.txt)
+ Добавлена возможность включать и отключать общую блокировку в многопотоке для блока взятия и фильтрации профилей
+ Исправлено создание лишних папок в файловых логах
+ Добавлена возможность очищать «зависшие» профили в файле контроля взятия профилей, путём выставления таймаута их нахождения там в минутах. Для этого в файл контроля взятия профилей потоками информация о взятых в работу профилях теперь заносится вместе со временем взятия. Во избежание нестыковок не рекомендуется одновременно использовать в работе версии шаблонов со старым и новым форматами.
+ Добавлена опция очистки кэша после работы (главным образом для того, чтобы кэш профилей не занимал места на диске). В настоящий момент работает с профиль-файлами (можно использовать для более точного понимания степени «нагулянности» профиля).
+ Исправлена ошибка с ненахождением профилей при использовании файла контроля профилей и его отсутствием по факту

Спойлер: iProfiler v1.7.2 (от 25.10.2021)

+ Добавлена возможность отключать в настройках контроль взятия профилей потоками шаблона
+ Добавлены дополнительные проверки на удаление профиля из файла контроля потоков
+ Изменены некоторые записи в лог на более логичные (актокоррекция эмуляции)
+ Улучшена логика первичной обработки профилей-папок
+ Исправлено дублирование название профилей-папок в файле контроля потоков

Спойлер: iProfiler v1.7.0 (от 18.10.2021)

+ Добавлена поддержка прокси IPv6 (при использовании учитывайте, что далеко не все сайты поддерживают такие прокси)
+ Добавлена возможность открывать несколько вкладок с сайтами перед работой
+ Добавлена возможность включать/выключать закрытие лишних вкладок
+ Добавлена возможность указывать количество добавляемых повторов после каждого потока (взамен просто "бесконечного" выполнения)
+ Исправлена проблема с ошибкой при маленьком количестве профилей в папке
+ Добавлена возможность автообновления профилей при работе
+ Исправлены неточности логирования в основном логе по выполнениям
+ Изменены некоторых описания настроек, часть последних переехала в другие вкладки
+ Доработан механизм фильтрации профилей при взятии для профилей-папок
+ Исправлена работа спинтакса в настройке "Значения для полей формы" (вкладка "Действия на сайтах")

 

[antyspama]

хорошие нововведения. скажите а ботность победили при заходах на сайт. в связи с развитием шаблона что по цене и абонентки

 

[Moonwalker]

хорошие нововведения. скажите а ботность победили при заходах на сайт. в связи с развитием шаблона что по цене и абонентки

Ну, ботность в целом скорее по шабу для Яндекса смотрят все. Этот для других вещей больше (в том числе, для нагула). Скажу так. У меня все еще нулевая. У многих пользователей - тоже. У кого-то есть, но тут главное разобраться в причинах и экспериментировать. Если у нескольких человек нулевая, это значит, что если роботность и есть, она не из-за шаба. А дальше уже варианты, сам понимаешь. Как нагуливал, где нагуливал, сколько трафика гнал, по каким ключам, как распределял трафик (по операторам, по количеству прокси, по ключам, по частоте и так далее)...
Я ради интереса попробовал на днях свежими профилями без нагула вообще. Роботность в районе 16% получилась.
Но это, повторюсь, касается именно заходов по ключам через Яндекс вот этим шаблоном.

Цены прежние (пока, скорее всего, до Нового года, потом пересмотрим).
Конкретно этот - 2750 разово без абонентки.
Шаб для Яндекса - 11000 при покупке, через три месяца подписка платная (3к - 3 месяца, 5к - полгода, 9к - год).
Если брать вместе, то 13000 (на iProfiler скидка).

 

[antyspama]

ок

 

[kirillkorobkin]

Как нагуливал, где нагуливал, сколько трафика гнал, по каким ключам, как распределял трафик (по операторам, по количеству прокси, по ключам, по частоте и так далее)...

А сколько нагуливаете по времени? Какой минимум, какой оптимальный срок?
Конечно, считать нагул только по сроку "в днях" не имеет смысла... Но если я делаю профиль бота по профилю посетителей моего сайта (интересы, сайты которые они посещают), то сколько по времени надо это делать, минимум и оптимально?
По вашему опыту. Я вот первый раз собираюсь... ПФ-девственник ))

 

[Moonwalker]

А сколько нагуливаете по времени? Какой минимум, какой оптимальный срок?
Конечно, считать нагул только по сроку "в днях" не имеет смысла... Но если я делаю профиль бота по профилю посетителей моего сайта (интересы, сайты которые они посещают), то сколько по времени надо это делать, минимум и оптимально?
По вашему опыту. Я вот первый раз собираюсь... ПФ-девственник ))

Скажу так: у каждого своя религия и он ей следует )) Лично я нагуливаю и по общетематическим сайтам, и по каким-то общим ключам. Т.е., условно, если планирую гнать на сайт по продаже авто, я не буду специально ходить только по сайтам авто-тематики. Но есть те, кто ходит так, это их право ))
По времени, по ощущениям, сейчас желательно от трех недель в сети светиться. Но для меня некритично, даже когда на 3-й день уже многие в работу пускали, у меня профили месяцами нагуливались ))
Оптимальные сроки/цифры для конкретных сайтов и своей схемы работы выясните только опытным путем. Чужой подход у Вас не факт, что сработает.

 

[kirillkorobkin]

Т.е., условно, если планирую гнать на сайт по продаже авто, я не буду специально ходить только по сайтам авто-тематики. Но есть те, кто ходит так, это их право ))

Ну не так топорно собираюсь сделать)
1 - есть интересы пользователей в метрике
2 - есть выдача по топ запросам по этим интересам
3 - есть отчет в симилар вебе: сайты, которые посещают посетители вашего сайта... И там даже есть показатель пересечения.

т.е. слепить профиль аккаунта-яши-бота, как по данным в метрике...

4 - пункт под вопросом: есть непосредственно сервисы Яши. И вот стоит ли ходить по ним и привлекать внимание или нет (и на каком этапе), с этим я еще не определился.. Этот вопрос интересен еще и потому, что Яша присваивает рейтинг юзеру за отзывы на картах, в маркете, на кинопоиске итп.. и вот его бы нагулять.. Но с другой стороны - сунуться на сайты Яши - это значит вообще под микроскоп попасть)))

И еще вопрос к вам как к специалисту бот-ПФа: как в метрике вывести отчет посещений только из своих ботов и проверить их качество на роботность?) Можно так?

 

[Moonwalker]

И еще вопрос к вам как к специалисту бот-ПФа: как в метрике вывести отчет посещений только из своих ботов и проверить их качество на роботность?) Можно так?

В лоб - никак. Только выстраивать отчеты. Я обычно смотрю по ключам, поскольку знаю, по каким хожу, а по каким нет. Плюс к этому можно добавлять, условно, группировку региона(по прокси)/типа устройства(я, как и многие, кручу мобилы)/времени(если крутите в какое-то время). Ну и еще какие-то можно. Тогда картина более объективная получается.
Просто было у нас, кто-то из пользователей пишет, мол, на одном сайте резко выросла роботность. Человек разбирался неделю, менял настройки эмуляции, менял схему нагула... Я потом интересуюсь, мол, посмотри по ключам. Оказывается - по ключам, по которым работал шаблон, роботность либо нулевая, либо минимальная. А по остальным - да, выросла (причину уже отдельно выяснять надо, нам важно было понять, где бот не так себя ведет).

 

[kirillkorobkin]

я, как и многие, кручу мобилы

А моб-ПФ крутите через эмулятор типа Нокса и Мему? Или через Зеннодроид? Наверное вопросы такие нубские... Ну я нуб и есть)

 

[Moonwalker]

А моб-ПФ крутите через эмулятор типа Нокса и Мему? Или через Зеннодроид? Наверное вопросы такие нубские... Ну я нуб и есть)

Нет, мобильные профили зеннопостером ))

 

[kirillkorobkin]

Нет, мобильные профили зеннопостером ))

Вы имеете ввиду просто здесь "ползунки подвигать" или что-то более серьезное ?)

 

[Moonwalker]

Ну, для создания мобильных профилей, да, образно, "подвигать ползунки" ))

 

[Nomaxxx]

Добрый день! Хочу приобрести шаб, мануал по работе прилагается или настройки "по умолчанию" для оптимальной работы?

 

[Moonwalker]

Добрый день! Хочу приобрести шаб, мануал по работе прилагается или настройки "по умолчанию" для оптимальной работы?

Оптимальная работа для чего? У каждого свои цели и задачи для использования шаблона, на всех не предусмотришь оптимальных настроек ))
Все настройки в шаблонах подписаны, если будут вопросы, непременно отвечу ))