GPT-4 vs GPT-3,5: где лучше работать редактору и копирайтеру. Часть 1

Привет! Я Леся Никитина, редактор из целевых коммуникаций Альфа-Банка. В прошлый раз я рассказала, как работать с ChatGPT редакторам, авторам и копирайтерам. Сегодня познакомимся с GPT-4, сравним, кто лучше справляется с текстовыми задачами и решим, кому отдать своё сердечко.

GPT-4 выкатили на прошлой неделе. В OpenAI сказали, что теперь чат-бот умнее, глубже понимает контекст и языки, может проверять информацию на достоверность, выдаёт более точные и креативные ответы. Я не буду пересказывать пресс-релиз и презентацию, познакомиться с ними вы можете вот тут. Поэтому сразу переходим к сравнению.

Полетели!

Прошлая версия не особо дружила с факт-чеком и любила фантазировать, поэтому приходилось держать руку на пульсе. Новая версия действительно настроена тоньше, сложные моменты чат-бот старается аккуратно обходить, но его легко запутать.

Я попросила две версии чат-бота рассказать про роман Франсуа Рабле «Гаргантюа и Пантагрюэль» и ответить, снимали ли по средневековому произведению фильмы. И если GPT-3,5 придумал свой ответ, то GPT-4 выдал правдивую информацию.

Запрос: Кем и когда был написан «Гаргантюа и Пантагрюэль»? Расскажи историю создания, кто и почему критиковал произведение, и ответь на вопрос: снимали ли по книгам фильмы?

Недостоверную информацию от GPT-3,5 я закинула проверить GPT-4 и тут бот немного поплыл — поддался влиянию старшего брата. Но при уточнении исправился.

Так что здесь ставлю плюс новой версии, но всех призываю самостоятельно проверять информацию.

Когда я прошу чат-бот редактировать текст, я прошу, чтобы он представил себя редактором: новостным, модным из глянцевого журнала, игровым — неважно, главное задать вектор. Сейчас мы пойдем в одну запрещенную соцсеть и найдём там рандомный коммерческий текст, чтобы скормить его двум версиям чат-бота.

Запрос: Привет! Есть вот такой текст «ТОП-5 советов по выбору будущего участка». Представь, что ты редактор в строительной компании. Проанализируй этот текст. Как думаешь, что здесь лишнее, а что не хватает? Перепиши этот текст так, чтобы он проще читался и стал короче.

Как видите, бот выдал разные версии. GPT-4 сразу понял, что я от него хочу, GPT-3,5 пошёл линейно и по запросу. Но ответ мне не понравился ни у того, ни у другого, поэтому запрос я переписала.

Запрос 2: Слушай, как-то скучно получилось. Сделай этот текст в разговорном стиле, чтобы он вызывал доверие. Замени обычные кавычки на кавычки-ёлочки, короткое тире на длинное и расставь ё, где она нужна.

GPT-4 справился, даже все ё расставил и кавычки. GPT-3,5 завис и не смог закончить текст и с пятой попытки, хотя очень пытался, а просьбу заменить кавычки и расставить ё он проигнорировал.

Доходим с финалистом до финальной точки. Просим чат-бот сделать финальную редактуру.

Запрос 3: А теперь вспомни, что ты всё-таки редактор в строительной компании и в твоей фирме так со своими читателями не общаются. Замени «ты» на «вы», убери из текста жаргон, но оставь лёгкость, с которой читается текст

Текст стал аккуратнее. Немного покрутить заголовок и чуть подправить текст — и в принципе можно публиковать. Ставлю плюс GPT-4

Чат-бот можно попросить подстроится под любую манеру письма — он может быть серьезным, шутливым, наглым. Мне кажется, тут проблем не будет ни у старой, ни у новой версии. Но тест есть текст. Попросим повторить бота за Авиасейлс.

Запрос: Привет! Нужно написать письмо клиенту и поздравить его с днем рождения. Пожелай ему здоровья, счастья, много денег и сделай, пожалуйста, в таком же тоне, как в примерах ниже:

1) Парень вышел к самолётам и проник в багажный отсек одного из них. Увы, план, надёжный, как швейцарские часы, не сработал — Максима заметили и передали сотрудникам полиции. Так что, друзья, не вариант. Лучше сразу в кабину к пилотам.

2) Но вообще если серьезно, мы провели исследование и действительно выяснили, что каждый восьмой россиянин отказывает себе в отпуске. Это без иронии серьёзная проблема — без отдыха и отпуска выгорит даже самый стойкий, поэтому о синдроме нужно говорить больше и качественнее.

В отличие от GPT-4, GPT-3,5 разленился: он полностью проигнорировал просьбу повторить стиль и решил забить на формальности. Окей. Но что было дальше, вам понравится: я спросила чат-бот, знает ли он, что такое Авиасейлс.

Запрос 2: Чат, а ты знаешь, что такое Авиасейлс?

Ответы практически идентичные. Ну раз знает, в лоб попросим написать поздравление в стиле сервиса, чего уж стесняться.

Запрос 3: Тогда напиши поздравление клиенту в стиле Авиасейлс

Бот и в новой, и в старой версии решил, что поздравление нужно написать именно от Авиасейлс, но GPT-4 попытался повторить за стилем компании. GPT-3,5 тут не справился, но думаю, если ему прописать грамотный и подробный запрос, у него все получится. Другой вопрос: а не проще ли это уже сделать самому?

Ситуация: идеи кончились, о чём писать — непонятно, сил придумывать тоже нет. Идём в жипити, просим о помощи.

Запрос: Привет! Придумай, пожалуйста, 10 необычных идей, о чём написать в личный блог, когда никуда не ходишь и сидишь 24/7 дома

Две версии очень хорошо справились с идеями. Где-то мысли повторялись, но все из предложенных вариантов применимы к жизни.

Подведём итог:

В следующей статье сравним, как две версии чат-бота:

Предыдущие статьи про ChatGPT:

СhatGPT для копирайтеров и редакторов: учимся ставить задачи чат-боту и получать максимум от работы с ним

«Все говорят про ChatGPT, а я не понимаю, как им пользоваться». Инструкция для новичков и тех, кто хочет дружить с ботом