- Регистрация
- 12.07.2014
- Сообщения
- 916
- Благодарностей
- 373
- Баллы
- 63
Всем привет!
Не так давно возникла необходимость в проверке большого числа доменов. Сделал многопоточный шаблон для проверки дропов.
Шаблон довольно прост.
Что проверяем
По API можно проверить
Whois - api.whois.vu
Индекс\упоминания в Яндекс - xml.yandex.ru
Индекс\упоминания в Гугл - xmlriver.com
РКН блокировка - api.antizapret.info
Соответственно сервисы должны быть оплачены или иметь лимиты для запросов.
Проверка Linkpad, Вебархива, ИКС производится GET запросами.
И для них используются мобильные прокси + для api.antizapret.info.
Синтаксис крокси
socks5://логин:пароль@ип:порт
Входящие настройки
Первая вкладка настроек
“Проверять только Whois (свободен\занят)” – проверяем только на свободен\занят. Остальные параметры не проверяются.
Если галка не стоит проверяем все ниже приведенные параметры:
Вторая вкладка настроек
Здесь указываем логины и пароль и выбираем сервися для проверок.
Тут я оставил на выбор изначальный вариант на GET-ах + новый вариант на API.
Третья вкладка настроек
Указываем где брать файл с прокси и домены для проверки.
Работа шаблона
Последовательно проходит по всем сервисам в каждом потоке.
Если домен занят то параметры не проверяются.
Если домен свободен то проверка идет в зависимости от выбранных параметров.
Данные проверки записываются в таблицу.
Если была ошибка выполнения шаблона, то не проверенный домен записывается в конец списка доменов.
Файлы и папки
IN – файл с доменами и список рефсайтов.
Рефки в основном используются в старом варианте проверки доменов.
OUT – выгружается готовые данные в xlsx-файлы с датой в названии.
“Готовые_данные_14_09_2019.xlsx”
Прокси – лежит файл с прокси.
Данные для заполнения логинов паролей
xmlriver.com
https://xmlriver.com/queries/
xml.yandex.ru
https://xml.yandex.ru/settings/
З.Ы.
Шаблон не идеален и это надо понимать
В выгрузке добавляются с каждым доменом еще и строка названий столбцов. Заморачиваться с настройкой этого в многопотоке не хотелось.
Отфильтровать в Excel не проблема.
Не так давно возникла необходимость в проверке большого числа доменов. Сделал многопоточный шаблон для проверки дропов.
Шаблон довольно прост.
Что проверяем
- Whois – занят\свободен, даты регистрации и освобождения.
- Индексы в Яндекс и Гугл
- Упоминания домена в Яндекс и Гугл
- Проверка ИКС
- Отбратных ссылок в Linkpad
- Web Archive –первая дата
- Блокировка РКН
По API можно проверить
Whois - api.whois.vu
Индекс\упоминания в Яндекс - xml.yandex.ru
Индекс\упоминания в Гугл - xmlriver.com
РКН блокировка - api.antizapret.info
Соответственно сервисы должны быть оплачены или иметь лимиты для запросов.
Проверка Linkpad, Вебархива, ИКС производится GET запросами.
И для них используются мобильные прокси + для api.antizapret.info.
Синтаксис крокси
socks5://логин:пароль@ип:порт
Входящие настройки
Первая вкладка настроек
“Проверять только Whois (свободен\занят)” – проверяем только на свободен\занят. Остальные параметры не проверяются.
Если галка не стоит проверяем все ниже приведенные параметры:
- Индекс в Яндекс
- Индекс в Гугл
- Упоминания в Яндекс
- Упоминания в Гугл
- Проверка ИКС
- Ссылки Linkpad
- Проверка WebArchive
- Проверка в РКН
Вторая вкладка настроек
Здесь указываем логины и пароль и выбираем сервися для проверок.
Тут я оставил на выбор изначальный вариант на GET-ах + новый вариант на API.
Третья вкладка настроек
Указываем где брать файл с прокси и домены для проверки.
Работа шаблона
Последовательно проходит по всем сервисам в каждом потоке.
Если домен занят то параметры не проверяются.
Если домен свободен то проверка идет в зависимости от выбранных параметров.
Данные проверки записываются в таблицу.
Если была ошибка выполнения шаблона, то не проверенный домен записывается в конец списка доменов.
Файлы и папки
IN – файл с доменами и список рефсайтов.
Рефки в основном используются в старом варианте проверки доменов.
OUT – выгружается готовые данные в xlsx-файлы с датой в названии.
“Готовые_данные_14_09_2019.xlsx”
Прокси – лежит файл с прокси.
Данные для заполнения логинов паролей
xmlriver.com
https://xmlriver.com/queries/
xml.yandex.ru
https://xml.yandex.ru/settings/
З.Ы.
Шаблон не идеален и это надо понимать
В выгрузке добавляются с каждым доменом еще и строка названий столбцов. Заморачиваться с настройкой этого в многопотоке не хотелось.
Отфильтровать в Excel не проблема.
- Категория
- Другое
- Номер конкурса шаблонов
- Четвертый конкурс шаблонов
- Уровень сложности
- Средний
Для запуска проектов требуется программа ZennoPoster или ZennoDroid.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...
Для того чтобы запустить шаблон, откройте нужную программу. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.
