Сниппеты эмуляции мыши: FullEmulationMouse

orka13 · 14.08.2018

SergSh сказал(а):
Немного не доглядел, аву автора по эмуляции помню.. По ссылке конкурсная статья от автора сего топика. Там решение для выявления видимых элементов.
https://zennolab.com/discussion/threads/navigacija-bota-na-web-stranicax.48679/

спс, я опять велосипед городил, так как забыл об этой теме, надо было просто с нее примеры взять. Там намного больше материала для "гулек" по сайтам.

backoff · 30.08.2018

LaGir, подскажи чем ты xPath ищешь? Каккой на твой взгляд самый эффективный вариант, и каклучше всего находить уникальный хПас элемента?

Larisa87 · 03.09.2018

LaGir, подскажите вот этот атрибут "topInTab"где найти?
http://joxi.ru/12M4Y8ocMKp9qm

backoff · 30.09.2018

LaGir сказал(а):
Эффективные варианты достаточно подробно объяснены например тут и тут

Спасибо, чето я прорустил это сообщение, очень помогло видео и статья, спасибо за ссылки, оказывается не все так и сложно, почти сразу разобрался ... Теперь будем практиковаться

Tsuk15 · 29.10.2018

@LaGir спасибо за эту тему! Все очень хорошо и понятно объяснил. Но я хочу спросить самое главное :-)

Как определить нужно ли это все для очеловечивания в глазах того или иного сайта ? По моему опыту баны выдаются за самые банальные вещи... Хотя я и работаю обычно с самыми простыми ресурсами. Наличие чего в коде страницы может говорить о том, что сайт палит движение мыши? Или возможно это можно увидеть в запросах через снифер? А может быть этого нельзя точно понять и все это паранойя любителей делать шаблоны?

Rooter85 · 02.11.2018

Как прочитать часть текста he с помощью FullEmulationMouseMoveAboveHtmlElement ?

frion-seo · 04.11.2018

Rooter85 сказал(а):
Как прочитать часть текста he с помощью FullEmulationMouseMoveAboveHtmlElement ?

Присоединяюсь к вопросу)
Так же частенько бывает, что текст занимает например 50% DIVa по ширине и получается что сначала все ок якобы по тексту ведет курсором, а дальше продолжает вести по пустому месту до границы DIVa....

backoff · 04.11.2018

такое бывает, но на норм сайтах + популярных движках, текст обычно закрыт в параграфы <p></p>
ну и xPath'ом выбираешь и ведешь

Rooter85 · 04.11.2018

frion-seo сказал(а):
продолжает вести по пустому месту до границы DIVa....

И даже если ведет не по пустому месту, смотрится как будто читает первоклассник. Хотелось бы сделать чтобы курсор ходил не от начала и до конца текста. Можно выделить из всего innerhtml подстроку, но как ее назначить html-элементом?

molotok · 13.11.2018

Сейчас изучаю самоучитель по быстрому чтению (автор Олег Андреев). Так вот в книге пишется, что вождение по тексту при чтении - это проблема с вниманием. Здоровому человеку нет необходимости водить карандашом, курсором и т.д. по строкам.

Думаю для очеловечивания бота достаточно реалистичной прокрутки страницы и движения мыши по экрану в разные стороны.

ezotonal · 14.11.2018

molotok сказал(а):
Сейчас изучаю самоучитель по быстрому чтению (автор Олег Андреев). Так вот в книге пишется, что вождение по тексту при чтении - это проблема с вниманием. Здоровому человеку нет необходимости водить карандашом, курсором и т.д. по строкам.

Думаю для очеловечивания бота достаточно реалистичной прокрутки страницы и движения мыши по экрану в разные стороны.

Это да. То же никогда не водил вышкой или пальцем по книге)) Только плавная прокрутка и все
Периферическое чтение так сказать

Juniorcpa · 15.11.2018

LaGir сказал(а):
Возможно это так, возможно это близко к правде, а может быть не совсем так/совсем не так. Нужны соответствующие исследования и вытекающие статистические данные (т.е. пруфы). Судить по себе или своим догадкам тоже не рекомендовал бы, так как сам в прошлом не раз обжигался из-за подобных оценок)
В то же время самостоятельно получить такую информацию несложно, чем и рекомендую заниматься всем, кто заинтересован продвинутой эмуляцией на сайтах. Берём сайт с метрикой, изучаем поведение людей в вебвизоре, чем больше, тем лучше. В идеале именно той аудитории, которую должен эмулировать ваш шаблон (сегменты по полу/возрасту/гео/...). Сводим в самые распространенные паттерны поведения ЦА, воплощаем их в логике шаблона - готово.

не знаешь, там не пофиксили выходы за поля мышки?)

backoff · 15.11.2018

molotok сказал(а):
Сейчас изучаю самоучитель по быстрому чтению (автор Олег Андреев). Так вот в книге пишется, что вождение по тексту при чтении - это проблема с вниманием. Здоровому человеку нет необходимости водить карандашом, курсором и т.д. по строкам.

Тут важно что алгоритм думает, а не какой-то олег андреев ))

molotok · 15.11.2018

backoff сказал(а):
Тут важно что алгоритм думает, а не какой-то олег андреев ))

Олег Андрее - это не кто-то, это серьезный специалист в своей области.

backoff · 15.11.2018

molotok сказал(а):
Олег Андрее - это не кто-то, это серьезный специалист в своей области.

дак никто не спорит, он пишет алгоритмы распознавания ботов? или он просто психолог?

ты вообще понял что я имел ввиду?

Sergodjan · 18.11.2018

Juniorcpa сказал(а):
не знаешь, там не пофиксили выходы за поля мышки?)

Это когда зависало при выходе за пределы видимой части экрана?
Если да, то фиксили..

Juniorcpa · 18.11.2018

sergodjan66 сказал(а):
Это когда зависало при выходе за пределы видимой части экрана?
Если да, то фиксили..

О, проверю, спасибо!

Juniorcpa · 19.11.2018

sergodjan66 сказал(а):
Это когда зависало при выходе за пределы видимой части экрана?
Если да, то фиксили..

var rnd = new Random();
Tab tab1 = instance.ActiveTab;
tab1.Navigate("http://vk.com");
if (tab1.IsBusy) tab1.WaitDownloading();
HtmlElement h2 = tab1.FindElementByXPath("//*[contains(@id,'ij_submit')]", 0);
tab1.FullEmulationMouseMoveToHtmlElement(h2);
Thread.Sleep(1500);
tab1.FullEmulationMouseClick("left", "click");

Как видим на гифке, мышка ушла за край и зависла. Не пофиксили

Sergodjan · 19.11.2018

Juniorcpa сказал(а):
Посмотреть вложение 33737

var rnd = new Random();
Tab tab1 = instance.ActiveTab;
tab1.Navigate("http://vk.com");
if (tab1.IsBusy) tab1.WaitDownloading();
HtmlElement h2 = tab1.FindElementByXPath("//*[contains(@id,'ij_submit')]", 0);
tab1.FullEmulationMouseMoveToHtmlElement(h2);
Thread.Sleep(1500);
tab1.FullEmulationMouseClick("left", "click");

Как видим на гифке, мышка ушла за край и зависла. Не пофиксили

Интересно, проверим.

PS: Похоже, что проблема только на ВК, т.к. проверил Яндекс, Инсту - там все ок,
прокручивает до элемента и жмет на него. Запишу в текущий список проблем, передам программистам.

Juniorcpa · 21.11.2018

sergodjan66 сказал(а):
Интересно, проверим.

PS: Похоже, что проблема только на ВК, т.к. проверил Яндекс, Инсту - там все ок,
прокручивает до элемента и жмет на него. Запишу в текущий список проблем, передам программистам.

Тестил только что на авито и одноклассниках - всё работает отлично, а на ВК нет

Пожалуйста, поправьте эту штуковину, хочу поковырять ВК :-)

Sergodjan · 21.11.2018

Juniorcpa сказал(а):
Тестил только что на авито и одноклассниках - всё работает отлично, а на ВК нет Пожалуйста, поправьте эту штуковину, хочу поковырять ВК

Да, передам проблему, обязательно.

andrey-ka · 22.01.2019

Спасибо за большую работу.
Заметил, что FullEmulationMouseMoveToHtmlElement позиционирует курсор в левом верхнем углу элемента. Можно ли как-то центрировать или случайную позицию использовать по элементу?

Alex733 · 22.01.2019

Код не много не причесан, прошу понять и простить.
Подробная инструкция в коде - в комментариях.
Кратко: - вызываем из кубика FullEmulMoveToCenterOfElm - прописываем, все что подсказывает компилятор и радуемся жизни. )

C#:

        /// <summary>
        /// rnd - Случайное число в диапазоне от start до end
        /// </summary>
        /// <param name="start">Меньшее число</param>
        /// <param name="end">Большее число</param>
        /// <returns>Число</returns>
    public static int rnd (int start=0, int end=100) {
        Random rnd = new Random();
          return rnd.Next(start, end);
       }


    /// <summary>
    ///   Двигает мышь к центру элемента методом FullEmulationMouseMove, с некоторым смещением
    /// </summary>
    /// <param name="instance">Инстанс</param>
    /// <param name="targetElem"> Целевой HtmlElement</param>
    /// <param name="deltaZero">  При true двигает точно к центру элемента, иначе к точке, которая смещена от центра элемента на случайное расстояние </param>
    /// <param name="click"> Кликает на элементе если true, default - false </param>
    /// <returns></returns>
       public static void FullEmulMoveToCenterOfElm(Instance instance, ZennoLab.CommandCenter.HtmlElement targetElem, bool deltaZero = false, bool click = false){
        Tab tab = instance.ActiveTab;
           int windheight =  int.Parse(tab.MainDocument.EvaluateScript("return window.innerWidth;"));
                   Point xyhe = targetElem.DisplacementInBrowser;
                   Point curXY = tab.FullEmulationMouseCurrentPosition;
                     int elemWidth = targetElem.BoundingClientWidth;
                     int elemHeight = targetElem.BoundingClientHeight;
            if (xyhe.Y + elemHeight >= windheight) {
                tab.FullEmulationMouseWheel(0, rnd(elemHeight + 120, elemHeight + 170));
            }
            if (xyhe.Y <= 10) {
               tab.FullEmulationMouseWheel(0, -1 * rnd(elemHeight + 20, elemHeight + 70));
            }
                         int deltaX = (int) Math.Ceiling((double) elemWidth * 0.23);
                         int deltaY = (int) Math.Ceiling((double) elemHeight * 0.15);
                      int sharpTrgX = xyhe.X + elemWidth/2;
                         deltaX = sharpTrgX - curXY.X >= 0 ? rnd(-4,deltaX): CC.rnd(-1*deltaX,4);
                
                    if (deltaZero) { deltaX = 0; deltaY = 0; }
                     int targetX = sharpTrgX - deltaX;
                     int targetY = xyhe.Y + elemHeight/2 + rnd(-1*deltaY,deltaY);
                     tab.FullEmulationMouseMove(targetX, targetY);
                    tab.FullEmulationMouseMove(targetX+1, targetY);
        if (click) tab.FullEmulationMouseClick("left", "click");
      }

UPD: Убрал в коде пару лишних символов.

Koqpe · 22.01.2019

Alex733 сказал(а):
Код не много не причесан, прошу понять и простить.

Будем причесывать :-)

Интересно что такое CC.rnd, а именно СС ?

Сниппеты эмуляции мыши: FullEmulationMouse

Client

Client

Client

Client

Новичок

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Administrator

Client

Client

Administrator

Client

Administrator

Client

Client

Client

Кто просматривает тему: (Всего: 2, Пользователи: 0, Гости: 2)