Бета-ридинг от нейросетей
Автор: Татьяна СкворцоваХочу поделиться опытом использования ИИ в качестве бета-ридеров. Вдруг кому интересно.
Сравнить мне довелось: чат ГПТ (платная подписка), Грок (платная подписка), Джимини (тоже платная подписка, но дешевая - всего 4 дрллара в месяц).
Итак, поехали.
Способность запомнить сюжет и не запутаться:
Чат ГПТ; Грок - нормально держат в "голове" сюжет книжки на 10 алок и путаются редко. Но при условии, что главы загружаются последовательно. Если прыгать из начала в конец, то теряют логику.
Джимини (дешевая подписка): в состоянии удержать сюжет объемом не больше алки. Если текста больше, начинает откровенно выдумывать на основе самых попсовых литературных штампов. Пользоваться становится невозможно.
Понимание психологии, подтекстов и нюансов
1-е место: Чат ГПТ с большим отрывом. Реально читает, как умный читатель.
2-е место: Грок. Нюансы понимает, но грубее чата ГПТ
3-е место: Джимини в принципе способно понимать нюансы и подтексты не хуже Грока, но из-за неспособности удерживать длинный сюжет все остальное становится бесполезным.
Объективность
Низкая у всех. Все под вас подстраиваются. Но по-разному.
Чат ГПТ просто хвалит как не в себя и рассказывает, какую великую литературу вы творите.
Грок этого не делает, но все равно выставляет вам оценки в зависимости от того, как понимает ваш запрос. Если он считает, что вы хотите больше критики, оценки будут ниже. Если думает, что вам нужна похвала, то выше. Если считает, что вы хотите поругаться, будет говорить гадости, зачастую откровенно выдумывая поводы для них. Одной и той же главе ставит разные оценки в зависимости от тона вашего общения с ним. Короче, претендует на объективность, но правды не доискаться.
Поиск логических нестыковок
Ищут все, но находят разное. Бывает пропускают явные дыры. Бывает, цепляются к ерунде. Качество поиска примерно одинаковое. И главное, чтобы они вообще искали проблемы с логикой, надо постоянно напоминать им этот запрос, иначе они забивают и уходят в чистую литературщину.
Качество генерируемого текста
Мне показалось, что ужасное у всех. Я не смогла использовать ни одну из этих сетей, чтобы полностью сгенерировать хотя бы один читабельный абзац. Они могут обсуждать ваш текст, могут предлагать синонимы, но генерят ужасно. Думаю, что есть люди, которые умеют это преодолевать.
Короче вот так.