- Регистрация
- 01.05.2015
- Сообщения
- 4 983
- Благодарностей
- 4 433
- Баллы
- 113
По мере того, как искусственный интеллект (ИИ) становится все более сложным, растет и технология, используемая для его создания. Одним из таких примеров являются модели Google Transformer или GPT-3, которые, как было показано, способны генерировать реалистично выглядящий текст. У этого может быть множество приложений, от помощи людям в написании до создания совершенно новых миров.
Стоп! Прошу простить меня уважаемых читателей, но абзац выше писал не я. Он был создан нейросетью по моему заголовку и команде. С первого раза. Без правок и дополнений. Это перевод на русский, а вот оригинал в качестве доказательства:
Я не стал бы доверять нейро-алгоритмам полностью написать статью для традиционного Конкурса статей, но сейчас можно сказать абсолютно уверенно – большую часть процесса уже можно им поручить. Как текстовую часть, так и собственно JS и C# код для зенно-шаблонов.
Многие следя за успешной статьёй прошлого конкурса шаблонов были разочарованы результатами, которые получили пользователи, особенно если оценивать потраченное время и ресурсы. Всё же контент после GPT-2 и предобученный GPT-3 сложно сравнивать – это небо и земля. Первый сразу бросается в глаза и Гугл его легко определяет. Второй, после некоторой фильтрации, удаления повторов и мелких недочётов, вполне увлекательное чтиво и, как результат, такие статьи любит и высоко ранжирует Гугл.
OpenAI
Буквально месяц назад самый известный сервис по нейро-генеренке, OpenAI, объявил о начале предоставления доступа к своим ресурсам для всех желающих (без списка ожидания как было раньше на протяжении трёх лет). К сожалению, многие из пользователей стран экс-СССР доступ этот официально не получат, потому что таких стран как Россия или Украина нет в списке разрешенных. Но нас эти запреты не остановят: прокси + SMS сервис и виртуальная карта зарубежного банка решают проблему. Думаю, у большинства пользователей не вызовет сложностей регистрация на OpenAI.
Все сервисы, о которых я буду рассказывать в этой статье, платные, но цена довольно низкая. Особенно по сравнению с услугами копирайтеров. Да, качество текстов значительно проигрывает грамотным статьям профессиональных авторов, но себестоимость статьи получается в 20-50 раз более низкая, в зависимости от сервиса и от жадности копирайтера, и это оправдывает все расходы.
ОpenAI предлагает 4 движка по убыванию способностей и цены: davinci, curie, babbage, и ada. Цена на токены (единица оплаты, 1000 токенов это примерно 750 слов) варьируется от $0.0600 за 1000 (ДаВинчи) до $0.0008 (Ада). При этом обратно пропорционально меняется скорость генерации. Несмотря на скорость и цену мне не удалось добиться более-менее хорошего результата текстов для движков ada и babbage, но может пока не хватает практики.
Это всё так называемые базовые серии. Кроме этих моделей OpenAI предлагает очень хорошую серию Instruct, которая неплохо зашла для генерации всяких методик, инструкций, описаний. Также в приватной бетке находится Codex серия. Эта штука в своё время наделала много шума, ведь она предназначена для написания кода. Да-да программисты скоро уйдут на свалку истории (конечно, нет).
Ну и наконец, предлагаются услуги по точной настройке вашей модели на основе вашего контента - Fine tuned models. Не будем подробно останавливаться на каждой модели, в документации всё есть, а если чего-то нет, то техподдержка и активное комьюнити вам оперативно помогут.
Более подробно ознакомиться с документацией можно по ссылке: https://beta.openai.com/docs/
Минусы или проблемы
- Многие модели натренированы в 17-19 годах и они почти ничего не знают о КОВИДе или о президентстве Байдена. Поэтому новостные статьи получаются не всегда удачными. Но! Если в prompt сообщить модели факты на которые она может опираться (КОВИД-глобальная эпидемия смертоностного вируса и т. д.), то модель может на опираясь на эти факты генерировать уже более фактологически верные новости. Также решением этой проблемы станет точно настроенная, специально обученная под ваш контент, кастомная модель. Новые модели (например embedding) уже оперируют знаниями 2020 года.
- Несмотря на дешевизну, при масштабных проектах затраты могут быть весьма значительными. Чтобы избежать лишних трат для начала рекомендую работать с сервисами – посредниками через их веб-интерфейс. Да, у них тоже есть лимиты, но иногда их можно обходить и генерировать тексты размером несколько миллионов слов в месяц всего за $100.
- Некоторые тематики под запретом. Например гэмблинг или сексуальные тематики. https://beta.openai.com/docs/usage-guidelines/content-guidelines Также запрещены текста вызывающую вражду, расовую дискриминацию и т. п. У сервисов настроены специальные фильтры для детекта подобного контента. Однако все эти ограничения очень расплывчаты и работая через веб-версии (не АПИ) некоторых ресурсов из списка ниже, можно попробовать генерировать текстовку и на запрещённые темы.
AI21.com
Этот конкурент OpenAI заявляет, что их модель Jurassic-1 имеет 178 миллиардов параметров, что немного больше чем GPT-3. Тем не менее я не заметил заметного улучшения в качестве текстовки и даже часто генерёнка от AI21 меня разочаровывала. Но, может быть, я ещё не до конца разобрался в параметрах и методах формирования prompt.
Во многом работа с AI21 очень похожа на процессы генерации текста у OpenAI: тоже есть токены, “игровая площадка”, API, аналогичные параметры. Примеры запросов по АПИ я также привёл во вложенном шаблоне. Есть два движка j1-large, j1-jumbo, но при особом запросе, после согласований, они натренируют вашу собственную модель. Ценовая модель тоже очень близка к сервису Илона Маска, да и требования к генерируемому контенту похожи, но, опытные коллеги говорят, что они на многое закрывают глаза.
Работа в ЗенноПостере с вышеперечисленными сервисами имеет два разных подхода. С OpenAI и AI21 нужно работать запросами по API. Для этого потребуется ключ, который можно получить сразу после регистрации.
Пример запроса для OpenAI и аналог для AI21:
API запросы:
//openai.com
return ZennoPoster.HttpPost("https://api.openai.com/v1/engines/" + project.Variables["engine"].Value + "/completions", project.Variables["data"].Value, "application/json", Cookies: "", AdditionalHeaders: new string[]{"Authorization: Bearer " + project.Variables["api_key"].Value});
//ai21.com
return ZennoPoster.HttpPost("https://api.ai21.com/studio/v1/" + project.Variables["engine"].Value + "/complete", project.Variables["data"].Value, "application/json", Cookies: "", AdditionalHeaders: new string[]{"Authorization: Bearer " + project.Variables["api_key"].Value});JARVIS
Самый первый абзац я получил с помощью одного из самых популярных сервисов, который использует мощности GPT-3 для предоставления услуг пользователям. До недавних пор у них был безлимитный план (на самом деле лимиты всё же были и мой пятикратный опыт разблокировки аккаунта тому подтверждение), который позволял создавать качественные тексты очень не дорого. Сейчас план поменялся, но, к счастью, сервисов аналогичных Джарвису довольно много.
Для работы с сервисами типа Джарвиса придётся попотеть и написать автоматизацию составления, постинга команд, нажатия кнопок, проверок и сбора данных. Тогда зачем использовать эти сервисы, если они и дороже, и медленнее, и глючнее, чем работа по АПИ с OpenAI/AI21? Есть несколько причин, которые могут обратить ваше внимание на эти сервисы:
- Использование «сложных» тематик. OpenAI/AI21 требуют апрува приложений перед использованием и если ваша тематика, например, гэмблинг, то скорее всего ваше приложение завернут. А вот в сервисах-посредниках чаще всего вы сможете использовать «нелегальные» тематики, хотя и там есть фильтры.
- При использовании автоматизации ЗП и при условии, если сервис не особо следит за лимитами, можно добиться более низкой себестоимости генерёнки.
- Часто сервисы создают свои обученные модельки и они показывают неплохие результаты.
- Всё же шаблоны сервисов с минимумом настроек более дружелюбны к новичкам, чем формирование сложных запросов с несколькими параметрами и странными командами на чужом языке.
Peppertype.ai | Create Quality Content Faster
www.peppertype.ai
Frase - Best SEO Content Optimization Tool & AI Writer
Frase empowers content creators to go from keyword to well-researched, SEO-optimized articles faster and better.
frase.io
SENSIT AI
What should I write for you today? SENSIT is your intelligent writing assistant. Based on the GPT-3 technology, SENSIT is able to quickly deliver stunning content for your blog posts, videos, social media ads, e-commerce products and many other use cases.
sensit.ai
Best SEO Content Writing AI Software And Optimization Tools
Make SEO content writing easy with software and tools boosted by AI Experience. See instant recommendations and optimization to outperform in search rankings.
www.outranking.io
Best AI for Blog Writing | WordHero: AI Writer & Content Generator
WordHero is simply the best AI writer for blog writing. Create high-quality content with top AI writing software. Discover the best AI content writer and generator today!
wordhero.co
Wordsmith | Automated Insights
Wordsmith is a self-service natural language generation platform that transforms your data into insightful narrative. Tell a better story about your data and stay ahead of the curve—any industry and any medium of communication.
automatedinsights.com
AI-Writer.com - Trustworthy AI Writing for Academia & Marketing
Generate up to 10k words for marketing, SEO and academic purpose - always including properly cited sources. If you can not verify everything an AI writes, can you trust anything?
Paraphrasing Tool | QuillBot AI
QuillBot's paraphrasing tool is trusted by millions worldwide to rewrite sentences, paragraphs, or articles using state-of-the-art AI.
quillbot.com
Готовый контент требует проверки, очистки и подготовки. Наиболее часто встречающаяся проблема – это повторы. Когда AI не понимает задачу или у него исчерпаны варианты, он начинает тупо повторять текст. Это нужно мониторить и в автоматическом режиме менять параметры или команды. Для этого разбиваем текст на предложения. Тут нет ничего лучше чем решение Лорда Альфреда, за что ему очередная благодарность. Затем сравниваем фразы и вычисляем коэффициент повторов.
Также частенько фраза обрывается на полуслове. Это такая особенность GPT-3. Для этого также разбиваем фразу на предложения, удаляем огрызок и склеиваем обратно в полноценный текст.
По-хорошему ещё нужно прогнать текст через какую-либо либу (звучит как рэп
) по грамматической коррекции текста. Но лично я так не делаю – в 95% случаев результат получается вполне удовлетворительный. Для постов в соцсети всё же это нужно сделать, эти тексты могут прочитать тысячи людей, отличии от длинных статей на сайтах, которые читают лишь поисковые боты.Монетизация
У OpenAI довольно хорошая документация и масса примеров.
На примерах остановимся немного подольше, ведь они подарят вам массу идей как можно монетизировать эти новые вдохновляющие возможности:
1. Синонимизация
Тут всё просто, даже самые дешевые движки вполне сносно синонимизируют или делают рерайт входящие тексты.
2. Генерация статей для полудорвейных сайты (полная автоматизация) и белых проектов (всё же требуется проверка текстов и вычитка)
При этом генерируется не только собственно текстовка, а полный набор элементов чрезвычайно важный для SEO: заголовки, микро-разметка, схемы, табличные данные, мета-теги. Если вы генерируете статьи для ДДЛ (доры для людей), то сейчас самая выигрышная тактика это комбинации контента: копипаста с указанием источника, копипаста без указания источника, переводные статьи и, конечно, статьи сгенерированные AI по ключам. Добавьте сюда разные типы постов: инфо-статьи, новостные, отзывы, сравнения или обзоры, FAQ и ваш сайт будет очень любим поисковиками за разнообразие и объём материалов.
Вот пример трафика только одной статьи сгенерированной по правильным ключам в трендовой тематике:
Монетизация сайтов тоже не представляет особой сложности: реклама Google Ads, Ezoic или Mediavine. Либо генерация статей нацеленных на аудиторию конкретных партнерок в вертикалях крипта, гемблинг, фарма.
3. Заработок по продаже готовых текстов или их написание под заказ (копирайтинг)
Бирж копирайтинга довольно много. Например textbroker, да и на многих сервисах фриланса есть разделы специалистов предлагающих свои услуги в написании статей. Вы думаете, что не сможете нормально писать статьи на английском со своим elementary уровнем? С помощью GPT-3 + онлайн-переводчик для контроля вполне сможете. Я не раз встречал посты от индусов, которые хвалились в группах сервисов своими успехами.
4. Генерация постов в соц. сети
Ну собственно поэтому статья всё ещё в формате «Король социалок». Да, посты генерируются неплохие, особенно повторяющиеся, тематические. Например для психологического паблика я генерирую аффирмации.
5. Написание клона stackoverflow
Это уже конкретная идея. Нет, я не говорю об этих копипастных дорвеях, которые все вы встречаете в ТОПах ища что-то по коду. Речь о создании довольно полезного сайта где собраны сгенерированные сниппеты с помощью Codex по самым рейтинговым вопросам из SOF.
6. Полезный сервис – обертка
Тут масса идей: от генерации платных гороскопов в зависимости от введенных пользователей параметров, до сервиса для владельцев сайтов по “усилению” статей (добавления ценности давно опубликованным статьям, их актуализации).
Буквально несколько дней назад OpenAI выкатили новую модель – Embedding.
Мне кажется это прекрасная возможность создания собственного сервиса ведь этот формат данных можно использовать в алгоритмах машинного обучения. Посмотрите примеры на этой странице и вероятно у вас появятся идеи где это можно применить - https://beta.openai.com/docs/guides/embeddings/what-are-embeddings.
Ну и для тех, кто хочет увидеть внутренности этих новых миров, я записал небольшое видео:
- Тема статьи
- Способы заработка, SEO / PPC, Соц. сети, Генерация
- Номер конкурса статей
- Шестнадцатый конкурс статей
Для запуска проектов требуется программа ZennoPoster или ZennoDroid.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...
Для того чтобы запустить шаблон, откройте нужную программу. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.
Последнее редактирование:
