Шаблон по парсингу и уникализации контента со сторонних сайтов

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43
Приветствую! Комментарии к содержанию поста:

1) "...шаблон по краже статей и выдача за свою" Предлагаю использовать более нейтральную формулировку. Пример: "Шаблон по парсингу и уникализации контента со сторонних сайтов".
2) Заголовок поста также необходимо изменить. Пример: "Парсим и уникализируем контент для публикации на Яндекс Дзен"
3) Было бы интересно, если бы вы проверили на уникальность контент, который спарсили, а также приложили результаты к посту.
4) Также было бы интересно увидеть внутреннию статистику из Яндекс Дзен по опубликованному посту.

Последние 2 пункта носят рекомендательный характер. Первые 2 пункта просим поправить. Благодарим за понимание.
Ответьте в дичку пж
 

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43
Если статьи связанные с 9111, попадут в ТОП-3, то 9111.ru перестанет существовать скорее всего и юристам придётся опять пересесть на Бентли и "таранить" Газели, ради заработка 60 лямов в месяц ))
Нет там в любую сферу где нужны посты/статьи
 

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43
Если статьи связанные с 9111, попадут в ТОП-3, то 9111.ru перестанет существовать скорее всего и юристам придётся опять пересесть на Бентли и "таранить" Газели, ради заработка 60 лямов в месяц ))
Вот ссылка на новый проект)
 

Duser

Client
Регистрация
11.08.2013
Сообщения
289
Благодарностей
198
Баллы
43
Дошли руки протестировать шаблон. Но, к сожалению, он у меня не заработал. Я пытался запустить шаблон с понижением версии из вот этого поста: https://zennolab.com/discussion/threads/shablon-po-parsingu-i-unikalizacii-kontenta-so-storonnix-sajtov.110743/post-735592

Прописал во входных настройка всё, что нужно: id, X-Csr-Token, X-FP-Token, путь к профилю и код после pixels. Во-первых шаблон сразу вылетел с ошибкой, в кубике: "Прочитать файл: logo.json". Такого файла не было "из коробки". Я создал пустой файл с таким именем. А дальше шаб поработал немного и в бесконечном цикле начал просить отгадать капчу, ничего не публикуя.

Я заметил, что параметры X-Csr-Token и X-FP-Token каждый раз разные. Я три раза вбивал эти значения во входные настройки. Но "чуда не произошло".

Наверное что-то с авторизацией. Немного расстроился. Ну и фиг с ним. Ковыряться дальше в шаблоне не буду. У меня нет на это времени, да и легче написать свой, с нуля. Тем более, что он на пост-гетах, я в них не силён.
 

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43
Дошли руки протестировать шаблон. Но, к сожалению, он у меня не заработал. Я пытался запустить шаблон с понижением версии из вот этого поста: https://zennolab.com/discussion/threads/shablon-po-parsingu-i-unikalizacii-kontenta-so-storonnix-sajtov.110743/post-735592

Прописал во входных настройка всё, что нужно: id, X-Csr-Token, X-FP-Token, путь к профилю и код после pixels. Во-первых шаблон сразу вылетел с ошибкой, в кубике: "Прочитать файл: logo.json". Такого файла не было "из коробки". Я создал пустой файл с таким именем. А дальше шаб поработал немного и в бесконечном цикле начал просить отгадать капчу, ничего не публикуя.

Я заметил, что параметры X-Csr-Token и X-FP-Token каждый раз разные. Я три раза вбивал эти значения во входные настройки. Но "чуда не произошло".

Наверное что-то с авторизацией. Немного расстроился. Ну и фиг с ним. Ковыряться дальше в шаблоне не буду. У меня нет на это времени, да и легче написать свой, с нуля. Тем более, что он на пост-гетах, я в них не силён.
Может нововведения какие-то, я на это сутки потратил чтобы выяснить похожи ли значения:
На одном и том-же аккаунте параметры одни и те же, подгружаешь другой аккаунт параметры меняются.
 

Duser

Client
Регистрация
11.08.2013
Сообщения
289
Благодарностей
198
Баллы
43
Может нововведения какие-то, я на это сутки потратил чтобы выяснить похожи ли значения:
На одном и том-же аккаунте параметры одни и те же, подгружаешь другой аккаунт параметры меняются.
Ну вот смотри, я создал три тестовых поста и вот такие значения:

X-Csr-Token
663fddc3308caf15e59f165f86c26596d882c484:1679747714781
0c12eaa962f05f095d09e3c22c251e845224596d:1679762991277
f1e6011c2f541b6c06af18b22b2ac900edbac892:1679763737413
cad1566221045764ab36080d69cd538c245be570:1679764227841

X-FP-Token
18718c40edd:33582d7f15e135cc:6985635c:2bb48f7d54a839deeb6250ca071e60f01b9ce9f3
18719ad28ad:3c0c9178d5092805:6985635c:5a2996cba25a4b24466d59ed151f22d9d3899a79
18719b88b45:226e7203ccc1777a:6985635c:e0cc6d7240b37527b2788f32ca070054713e1af4
18719c00701:b32d9443aad9d5f0:6985635c:a2cb406a4c7c21ed867da18ed617c6b6526185b9
 

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43
Ну вот смотри, я создал три тестовых поста и вот такие значения:

X-Csr-Token
663fddc3308caf15e59f165f86c26596d882c484:1679747714781
0c12eaa962f05f095d09e3c22c251e845224596d:1679762991277
f1e6011c2f541b6c06af18b22b2ac900edbac892:1679763737413
cad1566221045764ab36080d69cd538c245be570:1679764227841

X-FP-Token
18718c40edd:33582d7f15e135cc:6985635c:2bb48f7d54a839deeb6250ca071e60f01b9ce9f3
18719ad28ad:3c0c9178d5092805:6985635c:5a2996cba25a4b24466d59ed151f22d9d3899a79
18719b88b45:226e7203ccc1777a:6985635c:e0cc6d7240b37527b2788f32ca070054713e1af4
18719c00701:b32d9443aad9d5f0:6985635c:a2cb406a4c7c21ed867da18ed617c6b6526185b9
Да я понял о чем ты.
Даже не знаю что произошло, с момента создания, думаю на логин и пароль переделаю шаблон, чтобы он сам собирал эти данные, но это будет в свободное время.

При тестирование и создание все работало идеально, он собирал пост публиковал, я их после удалял, и данные всегда использовались одни и те же, может дзен не хочет автоматизации и изменяет ход событий, не знаю! Как то так.
 
  • Спасибо
Реакции: Duser

rewrite008

Client
Регистрация
09.07.2021
Сообщения
54
Благодарностей
29
Баллы
18
Привет. Можно понизить до версии 7.5.1?) Любопытно посмотреть
 

_HEDELKA_

Client
Регистрация
20.02.2022
Сообщения
648
Благодарностей
170
Баллы
43

Phoenix78

Client
Read only
Регистрация
06.11.2018
Сообщения
11 790
Благодарностей
5 718
Баллы
113

BoB

Client
Регистрация
05.09.2010
Сообщения
4
Благодарностей
0
Баллы
1
Возможно ли убрать все лишнее и оставить только постинг статьи с картинками в Дзен? Может кто-то уже сделал подобное?
 

Ruhas

Client
Регистрация
26.11.2019
Сообщения
666
Благодарностей
170
Баллы
43

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)