Cloud Flare - обход защиты на легке

Nord · Mar 3, 2018

Спасибо! Крутая штука!

Dimionix · Mar 3, 2018

Слишком замороченное решение, на мой взгляд. Всё отлично работает и решается в 130-150 строк кода без всяких доп. библиотек и на форуме даже где-то было такое решение.

doc · Mar 4, 2018

я единственный, кто рекапчу на кф встречает?

zortexx · Mar 4, 2018

Может прокси заюзанные?
Или уровень паранойи владельцев конкретного сайта повышенный.

Ни разу на прокладке кф рекапчи не видел.

itserviceinс · Mar 4, 2018

doc said:
я единственный, кто рекапчу на кф встречает?

blackhatworld мне постоянно выдаёт

StrategRus · Mar 4, 2018

Здравствуйте, пытался перенести ваш код в Visual Studio, вроде все нормально. ни на что не ругается, но программа зависает на client.SendAsync(msg).Wait(); и дальше не идет, в чем может быть проблема ?

Решил проблему вытащить все в отдельный поток, не знаю как это связано, но работает :-)

Автору темы большой спасибо!

StrategRus · Mar 6, 2018

Moadip said:
Раз проблема решилась вытаскиванием в отдельный поток, то значит до этого запуск был в основном, гуишном потоке.
Любые долговременные операции, скачивание, вычисления, надо обязательно выносить в отдельный поток, т.к. на их выполнение надо время, и пока данный код не выполнится, дальше программа работать не будет, соответственно и весь интерфейс подвисает.

Проблема была не в том, что он подвисал, а в том, что программа просто не выполнялась дальше. Не через 5 минут, не через 30 ( чекал брейкпоинтом после данной строчки)

Bas · May 27, 2018

Не хрюкает ни на 1 из протестированных мной сайтов((( К примеру сайт: https://tiny-pool.com. Вставляю складчик в свой проект, сразу получаю куки, вставляю свой адрес любой - "CSharp OwnCode Ссылка на объект не указывает на экземпляр объекта."

-=eXclass=- · Jul 30, 2018

Как исправить ??

Bas · Aug 2, 2018

-=eXclass=- said:
Как исправить ??

Везде в общем коде вместо CookieContainer указать полный путь ZennoLab...

iBotovod · Aug 29, 2018

Bas said:
Везде в общем коде вместо CookieContainer указать полный путь ZennoLab...

Для всех, кому эта фраза показалась набором символов, а не осмысленной инфой (я в первую очередь себя имею ввиду) нужно сделать следующее: во всех строках, по которым идут ошибки, нужно вместо CookieContainer написать ZennoLab.CommandCenter.CookieContainer

PS: Анекдот про подводную лодку и "Ты не выделывайся, ты рукой покажи!" будет актуален всегда.

iBotovod · Aug 29, 2018

Теперь новая проблема:
Ошибка при компиляции общего кода "CS0029" "Неявное преобразование типа "ZennoLab.CommandCenter.CookieContainer" в "System.Net.CookieContainer" невозможно". [Строка: 82; Cтолбец: 25]
Сейчас общий код выглядит вот так:

Code:

using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Threading;
using System.IO;
using System.Text.RegularExpressions;
using ZennoLab.CommandCenter;
using ZennoLab.InterfacesLibrary;
using ZennoLab.InterfacesLibrary.ProjectModel;
using ZennoLab.InterfacesLibrary.ProjectModel.Collections;
using ZennoLab.InterfacesLibrary.ProjectModel.Enums;
using ZennoLab.Macros;
using Global.ZennoExtensions;
using ZennoLab.Emulation;


using System.Net;
using System.Net.Http;
using System.Reflection;
using System.Collections;
using CloudFlareUtilities;


namespace ZennoLab.OwnCode
{
    public class CloudFlareBreaker
    {
        public string Address { get; set; }
        public string UserAgent { get; set; }
        public string Proxy { get; set; }
        public int MaxRetries { get; set; }

        private ZennoLab.CommandCenter.CookieContainer _cookieContainer;

        public void Break()
        {
            _cookieContainer = GetCloudFlareCookies(Address, UserAgent, Proxy, MaxRetries);
        }

        public ZennoLab.CommandCenter.CookieContainer GetCookieContainer()
        {
            return _cookieContainer;
        }

        public string GetCookieStr()
        {
            if (_cookieContainer == null) return null;

            var list = GetAllCookies(_cookieContainer)
                .Cast<Cookie>()
                .Select(c => c.Name + "=" + c.Value)
                .ToList();

            return string.Join(";", list);
        }

        private ZennoLab.CommandCenter.CookieContainer GetCloudFlareCookies(string address, string userAgent, string proxy, int maxRetries)
        {
            var currentTry = 0;

            while (currentTry < maxRetries)
            {
                try
                {
                    var cookies = new ZennoLab.CommandCenter.CookieContainer();

                    var msg = new HttpRequestMessage()
                    {
                        RequestUri = new Uri(address),
                        Method = HttpMethod.Get
                    };

                    msg.Headers.TryAddWithoutValidation("User-Agent", userAgent);

                    var client = new HttpClient(new ClearanceHandler(new HttpClientHandler
                    {
                        UseCookies = true,
                        CookieContainer = cookies,
                        Proxy = SetProxy(proxy)
                    }));

                    client.SendAsync(msg).Wait();

                    return cookies;
                }
                catch (Exception)
                {
                    currentTry += 1;
                }
            }

            return null;
        }

        private CookieCollection GetAllCookies(ZennoLab.CommandCenter.CookieContainer container)
        {
            var allCookies = new CookieCollection();
            var domainTableField = container.GetType().GetRuntimeFields().FirstOrDefault(x => x.Name == "m_domainTable");
            var domains = (IDictionary)domainTableField.GetValue(container);

            foreach (var val in domains.Values)
            {
                var type = val.GetType().GetRuntimeFields().First(x => x.Name == "m_list");
                var values = (IDictionary)type.GetValue(val);

                foreach (CookieCollection cookies in values.Values)
                {
                    allCookies.Add(cookies);
                }
            }
            return allCookies;
        }

        private WebProxy SetProxy(string proxy)
        {
            if (string.IsNullOrEmpty(proxy)) return null;

            WebProxy wp;

            var split = proxy.Split('@');

            if (split.Length == 1)
            {
                wp = new WebProxy(proxy);
            }
            else
            {
                var credential = split[0].Split(':');
                var addres = split[1];

                wp = new WebProxy(addres)
                {
                    Credentials = new NetworkCredential
                    {
                        UserName = credential[0],
                        Password = credential[1]
                    }
                };
            }

            return wp;
        }
    }   
}

Bas · Sep 5, 2018

iBotovod said:
private ZennoLab.CommandCenter.CookieContainer GetCloudFlareCookies(string address, string userAgent, string proxy, int maxRetries)

61-я строка, здесь не выдавало никаких ошибок при компиляции (на сколько помню). В общем попробуйте вместо ZennoLab.CommandCenter здесь System.Net указать. Сейчас нет возможности посмотреть свой код, как там в итоге расставлены точки над "ё".

iBotovod · Sep 5, 2018

Bas, спасибо за ответ.
У задавшего вопрос в этой строке ошибки нет, но у меня она появляется.
По итогу при таком общем коде:

Code:

using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Threading;
using System.IO;
using System.Text.RegularExpressions;
using ZennoLab.CommandCenter;
using ZennoLab.InterfacesLibrary;
using ZennoLab.InterfacesLibrary.ProjectModel;
using ZennoLab.InterfacesLibrary.ProjectModel.Collections;
using ZennoLab.InterfacesLibrary.ProjectModel.Enums;
using ZennoLab.Macros;
using Global.ZennoExtensions;
using ZennoLab.Emulation;


using System.Net;
using System.Net.Http;
using System.Reflection;
using System.Collections;
using CloudFlareUtilities;


namespace ZennoLab.OwnCode
{
    public class CloudFlareBreaker
    {
        public string Address { get; set; }
        public string UserAgent { get; set; }
        public string Proxy { get; set; }
        public int MaxRetries { get; set; }

        private ZennoLab.CommandCenter.CookieContainer _cookieContainer;

        public void Break()
        {
            _cookieContainer = GetCloudFlareCookies(Address, UserAgent, Proxy, MaxRetries);
        }

        public ZennoLab.CommandCenter.CookieContainer GetCookieContainer()
        {
            return _cookieContainer;
        }

        public string GetCookieStr()
        {
            if (_cookieContainer == null) return null;

            var list = GetAllCookies(_cookieContainer)
                .Cast<Cookie>()
                .Select(c => c.Name + "=" + c.Value)
                .ToList();

            return string.Join(";", list);
        }

        private ZennoLab.CommandCenter.CookieContainer GetCloudFlareCookies(string address, string userAgent, string proxy, int maxRetries)
        {
            var currentTry = 0;

            while (currentTry < maxRetries)
            {
                try
                {
                    var cookies = new ZennoLab.CommandCenter.CookieContainer();

                    var msg = new HttpRequestMessage()
                    {
                        RequestUri = new Uri(address),
                        Method = HttpMethod.Get
                    };

                    msg.Headers.TryAddWithoutValidation("User-Agent", userAgent);

                    var client = new HttpClient(new ClearanceHandler(new HttpClientHandler
                    {
                        UseCookies = true,
                        CookieContainer = cookies,
                        Proxy = SetProxy(proxy)
                    }));

                    client.SendAsync(msg).Wait();

                    return cookies;
                }
                catch (Exception)
                {
                    currentTry += 1;
                }
            }

            return null;
        }

        private System.Net.CookieCollection GetAllCookies(ZennoLab.CommandCenter.CookieContainer container)
        {
            var allCookies = new CookieCollection();
            var domainTableField = container.GetType().GetRuntimeFields().FirstOrDefault(x => x.Name == "m_domainTable");
            var domains = (IDictionary)domainTableField.GetValue(container);

            foreach (var val in domains.Values)
            {
                var type = val.GetType().GetRuntimeFields().First(x => x.Name == "m_list");
                var values = (IDictionary)type.GetValue(val);

                foreach (CookieCollection cookies in values.Values)
                {
                    allCookies.Add(cookies);
                }
            }
            return allCookies;
        }

        private WebProxy SetProxy(string proxy)
        {
            if (string.IsNullOrEmpty(proxy)) return null;

            WebProxy wp;

            var split = proxy.Split('@');

            if (split.Length == 1)
            {
                wp = new WebProxy(proxy);
            }
            else
            {
                var credential = split[0].Split(':');
                var addres = split[1];

                wp = new WebProxy(addres)
                {
                    Credentials = new NetworkCredential
                    {
                        UserName = credential[0],
                        Password = credential[1]
                    }
                };
            }

            return wp;
        }
    }  
}

в 82 строке появляется ошибка Неявное преобразование типа "ZennoLab.CommandCenter.CookieContainer" в "System.Net.CookieContainer" невозможно". [Строка: 82; Cтолбец: 25]

И что бы я туда не вставлял - хоть ZennoLab.CommandCenter., хоть System.Net. - в любом случае даже на проверке синтаксиса выдает красные подчеркивания, и вываливает error-ы при выполнении.

Если будет возможность - помогите пожалуйста.

iBotovod · Sep 6, 2018

Moadip said:
Ошибка возникла из за того, что в зенке в последних версиях появился свой CookieContainer.

вот блин. Я вижу что нестандартное поведение, но знаний не хватает понять почему.
После прописывания System.Net. все заработало.
СПАСИБО!

kiduep · Oct 4, 2018

iBotovod said:
вот блин. Я вижу что нестандартное поведение, но знаний не хватает понять почему.
После прописывания System.Net. все заработало.
СПАСИБО!

Не могли бы выложить рабочий код? А то уже вроде всё сменил, но не работает(
Спасибо

swiniks · Oct 16, 2018

kiduep said:
Не могли бы выложить рабочий код? А то уже вроде всё сменил, но не работает(
Спасибо

Так запускается, но увы защиту не проходит! Если защиты нет отрабатывает без ошибок.

C#:

using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Threading;
using System.IO;
using System.Text.RegularExpressions;
using ZennoLab.CommandCenter;
using ZennoLab.InterfacesLibrary;
using ZennoLab.InterfacesLibrary.ProjectModel;
using ZennoLab.InterfacesLibrary.ProjectModel.Collections;
using ZennoLab.InterfacesLibrary.ProjectModel.Enums;
using ZennoLab.Macros;
using Global.ZennoExtensions;
using ZennoLab.Emulation;


using System.Net;
using System.Net.Http;
using System.Reflection;
using System.Collections;
using CloudFlareUtilities;


namespace ZennoLab.OwnCode
{
    public class CloudFlareBreaker
    {
        public string Address { get; set; }
        public string UserAgent { get; set; }
        public string Proxy { get; set; }
        public int MaxRetries { get; set; }

        private System.Net.CookieContainer _cookieContainer;

        public void Break()
        {
            _cookieContainer = GetCloudFlareCookies(Address, UserAgent, Proxy, MaxRetries);
        }

        public System.Net.CookieContainer GetCookieContainer()
        {
            return _cookieContainer;
        }

        public string GetCookieStr()
        {
            if (_cookieContainer == null) return null;

            var list = GetAllCookies(_cookieContainer)
                .Cast<Cookie>()
                .Select(c => c.Name + "=" + c.Value)
                .ToList();

            return string.Join(";", list);
        }

        private System.Net.CookieContainer GetCloudFlareCookies(string address, string userAgent, string proxy, int maxRetries)
        {
            var currentTry = 0;

            while (currentTry < maxRetries)
            {
                try
                {
                    var cookies = new System.Net.CookieContainer();

                    var msg = new HttpRequestMessage()
                    {
                        RequestUri = new Uri(address),
                        Method = HttpMethod.Get
                    };

                    msg.Headers.TryAddWithoutValidation("User-Agent", userAgent);

                    var client = new HttpClient(new ClearanceHandler(new HttpClientHandler
                    {
                        UseCookies = true,
                        CookieContainer = cookies,
                        Proxy = SetProxy(proxy)
                    }));

                    client.SendAsync(msg).Wait();

                    return cookies;
                }
                catch (Exception)
                {
                    currentTry += 1;
                }
            }

            // return null; // Вызывает ошибку! Выполнение действия CSharp OwnCode Ссылка на объект не указывает на экземпляр объекта.
            throw new System.Exception("CloudFlare - не пройдена!"); //Заменил вместо return null что бы null не вызывал ошибку.
        }

        private System.Net.CookieCollection GetAllCookies(System.Net.CookieContainer container)
        {
            var allCookies = new CookieCollection();
            var domainTableField = container.GetType().GetRuntimeFields().FirstOrDefault(x => x.Name == "m_domainTable");
            var domains = (IDictionary)domainTableField.GetValue(container);

            foreach (var val in domains.Values)
            {
                var type = val.GetType().GetRuntimeFields().First(x => x.Name == "m_list");
                var values = (IDictionary)type.GetValue(val);

                foreach (CookieCollection cookies in values.Values)
                {
                    allCookies.Add(cookies);
                }
            }
            return allCookies;
        }

        private WebProxy SetProxy(string proxy)
        {
            if (string.IsNullOrEmpty(proxy)) return null;

            WebProxy wp;

            var split = proxy.Split('@');

            if (split.Length == 1)
            {
                wp = new WebProxy(proxy);
            }
            else
            {
                var credential = split[0].Split(':');
                var addres = split[1];

                wp = new WebProxy(addres)
                {
                    Credentials = new NetworkCredential
                    {
                        UserName = credential[0],
                        Password = credential[1]
                    }
                };
            }

            return wp;
        }
    }
}

kiduep · Oct 17, 2018

swiniks said:

Так запускается, но увы защиту не проходит! Если защиты нет отрабатывает без ошибок.

C#:

using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Threading;
using System.IO;
using System.Text.RegularExpressions;
using ZennoLab.CommandCenter;
using ZennoLab.InterfacesLibrary;
using ZennoLab.InterfacesLibrary.ProjectModel;
using ZennoLab.InterfacesLibrary.ProjectModel.Collections;
using ZennoLab.InterfacesLibrary.ProjectModel.Enums;
using ZennoLab.Macros;
using Global.ZennoExtensions;
using ZennoLab.Emulation;


using System.Net;
using System.Net.Http;
using System.Reflection;
using System.Collections;
using CloudFlareUtilities;


namespace ZennoLab.OwnCode
{
    public class CloudFlareBreaker
    {
        public string Address { get; set; }
        public string UserAgent { get; set; }
        public string Proxy { get; set; }
        public int MaxRetries { get; set; }

        private System.Net.CookieContainer _cookieContainer;

        public void Break()
        {
            _cookieContainer = GetCloudFlareCookies(Address, UserAgent, Proxy, MaxRetries);
        }

        public System.Net.CookieContainer GetCookieContainer()
        {
            return _cookieContainer;
        }

        public string GetCookieStr()
        {
            if (_cookieContainer == null) return null;

            var list = GetAllCookies(_cookieContainer)
                .Cast<Cookie>()
                .Select(c => c.Name + "=" + c.Value)
                .ToList();

            return string.Join(";", list);
        }

        private System.Net.CookieContainer GetCloudFlareCookies(string address, string userAgent, string proxy, int maxRetries)
        {
            var currentTry = 0;

            while (currentTry < maxRetries)
            {
                try
                {
                    var cookies = new System.Net.CookieContainer();

                    var msg = new HttpRequestMessage()
                    {
                        RequestUri = new Uri(address),
                        Method = HttpMethod.Get
                    };

                    msg.Headers.TryAddWithoutValidation("User-Agent", userAgent);

                    var client = new HttpClient(new ClearanceHandler(new HttpClientHandler
                    {
                        UseCookies = true,
                        CookieContainer = cookies,
                        Proxy = SetProxy(proxy)
                    }));

                    client.SendAsync(msg).Wait();

                    return cookies;
                }
                catch (Exception)
                {
                    currentTry += 1;
                }
            }

            // return null; // Вызывает ошибку! Выполнение действия CSharp OwnCode Ссылка на объект не указывает на экземпляр объекта.
            throw new System.Exception("CloudFlare - не пройдена!"); //Заменил вместо return null что бы null не вызывал ошибку.
        }

        private System.Net.CookieCollection GetAllCookies(System.Net.CookieContainer container)
        {
            var allCookies = new CookieCollection();
            var domainTableField = container.GetType().GetRuntimeFields().FirstOrDefault(x => x.Name == "m_domainTable");
            var domains = (IDictionary)domainTableField.GetValue(container);

            foreach (var val in domains.Values)
            {
                var type = val.GetType().GetRuntimeFields().First(x => x.Name == "m_list");
                var values = (IDictionary)type.GetValue(val);

                foreach (CookieCollection cookies in values.Values)
                {
                    allCookies.Add(cookies);
                }
            }
            return allCookies;
        }

        private WebProxy SetProxy(string proxy)
        {
            if (string.IsNullOrEmpty(proxy)) return null;

            WebProxy wp;

            var split = proxy.Split('@');

            if (split.Length == 1)
            {
                wp = new WebProxy(proxy);
            }
            else
            {
                var credential = split[0].Split(':');
                var addres = split[1];

                wp = new WebProxy(addres)
                {
                    Credentials = new NetworkCredential
                    {
                        UserName = credential[0],
                        Password = credential[1]
                    }
                };
            }

            return wp;
        }
    }
}

Спасибо, нашел альтернативный вариант на форуме.

swiniks · Oct 17, 2018

kiduep said:
Спасибо, нашел альтернативный вариант на форуме.

Не за что, я тоже где то в 3 кубика вкладывал, но с библиотекой было бы лучше конечно.

ТРОН · Oct 19, 2018

kiduep said:
Спасибо, нашел альтернативный вариант на форуме.

Продублируйте сюда, упростите жизнь тому, кто столкнется с таким же вопросом

kiduep · Oct 19, 2018

Osedjuse said:
Продублируйте сюда, упростите жизнь тому, кто столкнется с таким же вопросом

Воспользовался этим решением. Немного более объемный проект (не в одном кубике), но работает и это главное. Спасибо автору за решение

ssXXXss · Dec 25, 2018

сегодня понадобилось обойти защиту на одном сайте, и не получилось, пришлось через Jint сделать
так же подключил xNet, там можно и соксы использовать
проверил на нескольких сайтах, работает

kagorec · Dec 25, 2018

ssXXXss said:
сегодня понадобилось обойти защиту на одном сайте, и не получилось, пришлось через Jint сделать
так же подключил xNet, там можно и соксы использовать
проверил на нескольких сайтах, работает

Альтернативную ссылку на архив предоставь пожалуйста, на облако (любое - mail.ru, yandex, mega ..)

ssXXXss · Dec 25, 2018

kagorec said:
Альтернативную ссылку на архив предоставь пожалуйста, на облако (любое - mail.ru, yandex, mega ..)

да сейчас хром всё блокирует почти ))
либы все открытые если знаешь как открывать, если есть сомнения то открой и просмотри их

samsonnn · Dec 25, 2018

ssXXXss said:
сегодня понадобилось обойти защиту на одном сайте, и не получилось, пришлось через Jint сделать
так же подключил xNet, там можно и соксы использовать
проверил на нескольких сайтах, работает

Котяра не пашет твоя магия!

ssXXXss · Dec 25, 2018

samsonnn said:

я делал с локальным IP, и сейчас только заметил, xNet с протоколом прокси не работает, его надо вырезать
сейчас перезалью

Cloud Flare - обход защиты на легке

Client

Attachments

Client

Moderator

Client

Client

Активный пользователь

Client

Новичок

Client

Новичок

Client

Client

Attachments

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Client

Attachments

Client

Client

Client

Client

Users Who Are Viewing This Thread (Total: 1, Members: 0, Guests: 1)