❤️ YouTube-Parser v5.1.0 | Мощный парсер данных и контактов из YouTube

Smbrnr

Новичок
Joined
May 21, 2019
Messages
3
Reaction score
0
Points
1
Спасибо. А может ли парсер парсить первично не видео, а каналы по ключевикам?
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Спасибо. А может ли парсер парсить первично не видео, а каналы по ключевикам?
Может, как и по видео.
 

Smbrnr

Новичок
Joined
May 21, 2019
Messages
3
Reaction score
0
Points
1
Давайте обрисую полностью тогда требования, чтоб по 100 вопросов не задавать. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам, формировать таблицу вида " Канал - кол-во подписчиков - кол-во просмотров - инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - инфа о канале - мейл". При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов"). При этом какая будет скорость Парсинга, если единственный глобальный ограничивающий параметр - это страна парсинга?
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Давайте обрисую полностью тогда требования, чтоб по 100 вопросов не задавать. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам, формировать таблицу вида " Канал - кол-во подписчиков - кол-во просмотров - инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - инфа о канале - мейл". При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов"). При этом какая будет скорость Парсинга, если единственный глобальный ограничивающий параметр - это страна парсинга?
1. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам - да.
2. Формировать таблицу вида "Канал - кол-во подписчиков - кол-во просмотров - да
3. Инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - да, но фильтровать по 3 последним видео нужно самому в таблице.
4. инфа о канале - мейл - да, если Email указан.
5. При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов") - да, но только нужно вначале спарсить общее кол-во каналов по поисковым запросам, а потом уже отдельным парсингом собирать информацию о каналах с применением фильтрации.
6. 1 ключ - 6-10 секунд, на входе 400-600 результатов с ключа.
 

Hannes

Client
Joined
Feb 3, 2016
Messages
540
Reaction score
278
Points
63
Пользуюсь парсером пол года. Функционал отличный. Пока не было задачи по парсингу ютуба, которую не мог бы решить этот парсер. :-)
Поддержка отличная, все вопросы решаются быстро. Рекомендую к сотрудничеству, Дмитрий своё дело знает!
 
  • Thank you
Reactions: Meteorburn

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.0
  • YouTube-Parser полностью пересобран, каждая функция парсинга полностью переписана
  • Весь парсинг вынесен в общий код, благодаря чему проект оптимизирован на 200%
  • Полностью изменена логика парсинга (если раньше шаблон парсил по 1 странице и делал сохранение в отчёт, то теперь парсит сразу всё количество результатов и потом записывает в отчёт)
  • Все данные теперь собираются через отдельную библиотеку, что увеличило стабильность и скорость парсинга
  • Теперь шаблон умеет менять API из файла прямо во время парсинга (теперь не нужно перезапускать потоки, чтобы продолжить парсинг, шаблон сам заменит ключ из доступных и продолжит с того же места)
  • Добавлены обработчики для всех известных мне ответов от API при парсинге (теперь шаблон напишет, по какой причине не идёт парсинг)
  • Добавлена возможность парсить данные поисковой выдачи и данных видео без API (в связи с урезанием квоты, появилась возможность парсить без API вовсе)
  • Кардинально изменена логика сохранение результатов (теперь не используется множество таблиц для сохранения результатов, шаблон сам умеет создавать таблицы с данными после завершения парсинга)
  • YouTube-Parser теперь генерирует красивые отчёты с возможностью фильтрации
  • При парсинге комментариев сохранена иерархия "Комментариев" и "Ответов". В отчёте видно, на какой комментарий был дан ответ.
  • В парсинге без API можно указывать сколько страниц парсить по ключу
  • Во всех функция шаблон теперь умеет парсить, как по ID-канала, так и по Username
  • Изменения во "Входных Настройках"
  • Убраны не актуальные опции
  • Изменения в "Оповещениях"
  • Почищен проект от мусора
  • Шаблон полностью на C#
  • Множество мелких исправлений
  • Шаблон дополнительно обфусифицирован (зашифрован)
Шаблон обновится 25 июня.
 
  • Thank you
Reactions: Samouchka

Starle

Client
Joined
Nov 9, 2010
Messages
18
Reaction score
4
Points
3
Радует что автор не сидит на месте и всё время улучшает свой шаблон, таких вообще единицы, удивляюсь как он вообще всё успевает. Шаблон работает и выполняет свой функционал, парсер позволяет расширить возможности работы с ютубом, например автоматизировать работу с темой, которая имеет большое количество ключей, я пользуюсь несколькими только функциями, но тем он хорошо, что подойдёт если не всем, то почти всем кто работает с ютубом.
 
  • Thank you
Reactions: Meteorburn

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.1
  • Исправлен баг в функции парсинга подписчиков из файла (шаблон не видел файл с каналами)
Обновление YouTube-Parser 3.2
  • Восстановлена функция скачивания видео и копирование каналов после недавних изменений YouTube
  • В проект добавлены новые DLL-библиотеки
Библиотеки обязательно требуют установки, без них шаблон работать не будет.
 

Aiden

Client
Joined
Jun 21, 2017
Messages
16
Reaction score
4
Points
3
ok np I will fix thanks so much for the update you rock!!!!
 
  • Thank you
Reactions: Meteorburn

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.3
  • Улучшен парсинг и скачивание субтитров (в последнее время можно было заметить, что субтитры парсились хаотично, либо сгенерированные или загруженные автором. Сейчас этот баг исправлен: приоритет стоит на "загруженных", если "загруженных" нет, парсятся "сгенерированные")
  • Временно убрана возможность указать количество сущностей на ключ при парсинге поисковой выдачи через API (функция работала не совсем корректно, убрал временно для последующего улучшения)
  • Исправлен парсинг тегов при парсинге данных видео без API (теги парсились одинаковые для всех видео, теперь парсится корректно)
  • Исправлен парсинг данных видео по списку видео (раньше шаблон не видел указанного списка с видео)
  • Испрвлены возможные проблемы со скачиванием видео и копированием канала
  • Обновлены библиотеки
Для работы шаблона нужно перекачать все библиотеки.
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.4
  • Добавлена возможность скачивать только аудио дорожку при скачивании видео
  • Исправлен парсинг количества видео в поисковой выдаче через файл
 

Aiden

Client
Joined
Jun 21, 2017
Messages
16
Reaction score
4
Points
3
Hi were can i download the new version of the parser 3.4 update please
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5
  • Исправлена логика замены API-ключей в потоке (исправлены возможные проблемы при парсинге)
  • Длина видео при парсинге "Данных видео" сохраняется в формате времени по которому можно сделать сортировку
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.1
  • В парсинг данных канала добавлен сбор категорий канала
  • В парсинг данных канала добавлен сбор страны канала, указанной в настройках канала
  • Добавлена возможность разгадывания рекаптчи при парсинге Email через CapMonsterCloud
  • Исправления в создаваемых результирующих таблицах
  • Исправления и оптимизация сбора данных каналов и посковой выдачи
  • Мелкие исправления в уведомлениях
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.2
  • Изменения в логике сбора данных
  • Изменения при сохранении таблицы с результатами
  • Изменения в парсинге метаданных канала при парсинге Email
  • Обновление библиотеки EPPlus
  • Обновление других библиотек
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.3
  • Добавлена возможность парсинга поисковой выдачи по темам, которые YouTube назначил видео, плейлистам, каналам
  • Музыка
  • Десткая музыка
  • Христианская музыка
  • Классическая музыка
  • Кантри
  • Электронная музыка
  • Хип-хоп музыка
  • Инди
  • Джаз
  • Азиатская музыка
  • Латиноамериканская музыка
  • Поп-музыка
  • Регги
  • Ритм-энд-блюз
  • Рок-музыка
  • Соул
  • Игры
  • Экшен
  • Экшн-адвенчер
  • Казуальные
  • Музыка из компьютерных игр
  • Головоломки
  • Гонки
  • РПГ
  • Симуляторы
  • Спортивные игры
  • Стратегии
  • Спорт
  • Американский футбол
  • Бейсбол
  • Баскетбол
  • Бокс
  • Крикет
  • Футбол
  • Гольф
  • Хоккей
  • Смешанные боевые искусства
  • Мотоспорт
  • Реслинг
  • Теннис
  • Волейбол
  • Развлечения
  • Мультфильмы
  • Юмор
  • Кино
  • Изобразительное искусство
  • Стиль жизни
  • Мода
  • Фитнес
  • Еда
  • Здоровье
  • Хобби
  • Домашние животные
  • Красота
  • Технологии
  • Туризм
  • Транспортные средства
  • Знания
  • Общество
  • Переведены темы на русский язык при парсинге данных каналов
  • Добавлена возможность копировать каналы из файла со списком ссылок на каналы (теперь можно копировать сразу несколько каналов, а не по одному)
  • Теперь при парсинге ответов к комментариям они будут сохраняться сверху-вниз по дате, как это и представлено в YouTube
  • Улучшено определение наличие почты в разделе канала "О канала" (некоторые пользователи встречались с ошибкой определения наличия почты на канале )
  • Исправлен парсинг видео по "категориям видео"
  • Парсинг трансляций теперь не отдельная сущность, а сущность отсносящаяся к видео (для видео добавлен фильтр по трансляциям)
  • Изменения в оповещениях при парсинге почт
Шаблон теперь распространяется по подписке (абонплата)
 
Last edited:

Seoshniks

Новичок
Joined
Feb 16, 2020
Messages
2
Reaction score
0
Points
1
Парсер умеет парсить видосы с раздела Тренды с нужного гео?
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113

Seoshniks

Новичок
Joined
Feb 16, 2020
Messages
2
Reaction score
0
Points
1

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113

Anatrop

Новичок
Joined
Mar 11, 2020
Messages
1
Reaction score
1
Points
3
Отличный и очень гибкий скрипт. Скорость работы поражает. Единственный минус - разбивание результатов на отдельные таблицы при работе в многопотоке, но лечится двумя скриптами из интернета на объединение таблиц. Поэтому вообще никакого геморроя, автоматизация шикарная. Разработчику отдельное спасибо за помощь с вопросами
 
  • Thank you
Reactions: Meteorburn

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.5
  • Переработаны функции парсинга без использования API.

  1. Парсинг поисковой выдачи
  2. Парсинг данных канала
  3. Парсинг данных видео

  • Теперь парсинги без API полноценно могут использовать прокси (http, socks4, socks5)
  • Парсинг контактов теперь не использует API
  • Парсинг почт теперь не использует API
  • Скачивание субтитров теперь не использует API
  • Скачивание видео теперь не использует API
  • Копирование каналов теперь не использует API
  • В парсинг данных каналов без API добавлена возможность предварительной фильтрации по подписчикам и просмотрам
  • В парсинг почт добавлена возможность парсить почту из описания канала
  • В результирующую таблицу данных видео и поисковой выдачи из парсингов без API добавена ячейка "категории видео"
  • В результирующую таблицу с почтами добавлена новая ячейка - "страна канала"
  • В результирующую таблицу с данными видео из парсинга данных видео без API добавлена ячейка - "количество комментариев"
  • При парсинге данных каналов без API собирается дополнительная информация о наличии почты на канале под Recaptcha (теперь можно сразу отфильтровать каналы с почтами и парсить по ним)
  • При скачивании субтитров теперь есть опция выбора какие субтитры скачивать: "Авторские", "Сгенерированные" или "Доступные"
  • Переработана функция скачивания видео (при скачивании аудиопотока теперь скачивается максимальное качество аудио и другие изменения)
  • Скачивание видео возможно запускать многопоточно по списку ссылок на видео
  • Оптимизирован забор нового ключа API при израсходовании квоты (раньше шаблон перебирал каждый раз список перед взятием нового ключа, на что затрачивалось время)
  • Во все парсинги без API добавлены "ограничивающие" параметры для потоков, чтобы была возможность каждому потоку назначить свой прокси и количество данных для сбора (раньше поток пытался собирать сразу все данные, из-за чего была большая вероятность попасть на каптчу или ошибку 429 Two many requests)
  • Изменения в оповещениях
  • Изменения во входных настройках шаблона (часть настроек была перенесена на отдельную вкладку)
  • Изменены файлы проекта (конфигурационные файлы были перемещены в отдельную папку)
  • Обновлены библиотеки и добавлена новая
  • Удалены зависимости от некоторых сторонних библиотек
  • Множество других изменений
Для корректной работы проета требуется перекачать файлы проекта и и DLL библиотеки полностью заново.

51874
51875
51876
 
Last edited:

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.6
  • Добавлена возможность извлекать "почты", "ссылки", "мобильные номера" из описания каналов и видео во всех парсингах, как с АПИ так и без (теперь нет необходимости производить повторный парсинг каналов для на получение почты из описания, почта может быть извлечена во время парсинга данных видео или каналов и записана в отдельную колонку)
  • Добавлена опция "Не удалять прокси из списка"
  • Убран парсинг почт из описания канала в категории "Парсинг Email", так как теперь функция добавлена в парсинг данных видео и каналов
  • Изменёна логика присутствия email на канале в связи с последними изменениями в YouTube
  • Другие исправления
52433
52434
 

boragud

Пользователь
Joined
Oct 28, 2010
Messages
93
Reaction score
24
Points
8
Хочу поблагодарить за шаблоны.Так как я новичек в ютубе и сам в возрасте,то я недели две разбирался с настройками.Особенно не заморачивался с точной настройкой шаблонов-спарсил видео,залил на канал с ссылками на партнерку и все,на некоторых видео по15-30тыс. просмотров!!Шаблоны парсер и заливщик окупились за месяц и уже приносят прибыль!Поддержка на Высоте и всегда есть помощь!Еще раз огромное спасибо за Ваши шаблоны и помощь .
P.S.Новый парсер -бомба!
 
  • Thank you
Reactions: Meteorburn

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.7
  • Добавлен парсинг трендов с эмуляцией стран (теперь есть возможность спарсить данные видео из трендов, получить все метаданные по ним и их позицию на странице трендов. 1 минута - 1 страна)
52608


Пример результатов: Посмотреть

52609

  • Убрана ячейка количество комментариев при парсинге данных видео без API (получить количество просмотров через данный парсинг временно нельзя и комментарии всегда записывались со значением "0")
 

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
В связи с новыми недавними ограничениями в YouTube на открытие почт из под кнопки ReCaptcha (открытие почт только с аккаунта и лимит 3 в день)
В YouTube-Parser есть отдельное приобретаемое решение работающее в связке с шаблоном позволяющее по прежнему собирать почты из под кнопки, подробнее узнавайте. Также есть возможность парсить почты на заказ.

53446
 
Last edited:

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser 3.5.8
  • Функция сбора Email из под кнопки ReCaptcha в разделе "О канале" вновь собирает почты посредством плагина к шаблону.
Теперь для сбора почт из под рекаптчи нужны Cookies YouTube в формате: Zp Profile, JSON или Net Scape
1 кука YouTube - 1-2 почты с канала в сутки.

Скорость парсинга через плагин (зависит от сервиса распознавания):
1 поток - 100 почт / 3 часа
10 потоков - 100 почт / 20 минут

Цена: 20$
Отдельно от YouTube-Parser приобрести нельзя.

53709


  • Теперь при парсинге данных каналов без API собирается данные "Подтверждён"
53707
 
Last edited:

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser v3.6
  • Функция "Скачивания видео" адаптирована под изменения в YouTube (видео и раньше скачивались без проблем, но некоторые видео скачать не удавалось, эти изменения теперь позволяют скачивать ранее недоступные видео)
  • Добавлена возможность скачивать видео в 360p, 480p, 720p, 1080p (раньше была возможность только в максимально качестве или 720p)
  • Добавлена возможность подключать cookies при парсинге данных без API, а также скачивании видео и копировании канала
Подключение cookies это ещё одна возможность на ровне с прокси обойти лимит запросов к YouTube при парсинге большого количества данных или видео без API. Это значит, что теперь с одного IP можно собирать или скачивать большое количество данных просто подключая файл с cookies, а не меняя IP.
Cookies поддерживаются только в формате .json из шаблонов YouTube-DorGen. Для этого требуется поместить файл кук в папку проекта и шаблон подхватит эти куки.
  • В функциях скачивания видео теперь учитывается User-Agent установленный в настройках
  • При парсинге данных канала без API теперь можно указать какое количество последних видео собирать с канала (раньше была возможность парсить все или только последнее загруженное видео)
  • При скачивании обложек видео, файл с обложкой не создаётся, если у видео нет обложки (сейчас скачиваются только загруженные автором обложки)
  • Исправлена ошибка сохранения таблицы из функции "Парсинг количества видео в выдаче"
  • Другие исправления касающиеся парсинга с API
 
Last edited:

Meteorburn

Client
Joined
May 23, 2016
Messages
1,557
Reaction score
627
Points
113
Обновление YouTube-Parser v3.6 [r2]
  • Добавлена возможность парсить наличие монетизации у чужих видео
Парсить монетизацию видео возможно только через парсинг данных видео без API. Аналог TubeSift только с большими возможностями по парсингу. Функция платная, но в течение месяца доступна для всех кто приобретал шаблон.
  • При копировании канала теперь можно указывать качество скачиваемого видео (360p, 480p, 720p, 1080p)
  • Категории видео при парсинге данных без API переведены на русский язык
  • При скачивании видео с названиями не на кириллице и не на латинице видео сохраняются с их оригинальными названиями
  • Изменены заголовки для резльутирующих таблиц на более понятные
  • Улучшена стабильность скачивания видео
  • Исправлен парсинг почт, ссылок, номеров из описания видео, если описания были пустыми
  • Удалена опция парсинга статистических данных у видео при парсинге поисковой выдачи (лайки, дизлайки, просмотры)
 

Users Who Are Viewing This Thread (Total: 1, Members: 0, Guests: 1)