Нейродетектор от Яндекса
Автор: Марианна СмирноваЯ недавно прочла эссе Вадима Нестерова -- он тестировал нейродетектор от Яндекса и делился результатами. Я тоже попробовала погонять этот детектор -- на собственных текстах и на чужих. Мои он определял как авторские, что и требовалось доказать. Единственное, почему-то стихи воспринимал как ИИ -- но достаточно было записать их в строчку, и он прозревал. Более того, он и в сложных случаях не лажал...
Чистый нейрослоп легко отличить на глаз. Но если взять авторский текст и попросить ИИ переписать его в духе, скажем, Конан Дойля, то отличить эту стилизацию от человеческой будет сложно. Человеку. А вот нейродетектору от Яндекса это оказалось раз плюнуть. Он уверенно распознавал как ИИ даже те отрывки, которые представляли собой стилизацию авторского уникального текста под авторский же стиль других писателей. Проверено лично мной.
Казалось бы, идеально.
Но сегодня в ТГ-беседе на эту животрепещущую тему выяснилось, что мой собеседник тоже проводил такие эксперименты. Только он, в отличие от меня, вписывал в промпт техзадание обойти детектор.
Так вот. Текст, сгенерированный по этому техзаданию, Яндекс-детектор определил как человеческий на 100%. При том, что как раз его любой человек на глаз, без всяких детекторов, запалит как генеренку — он просто фонит ИИ. Скажем так: я была опечалена.
Самой мне обходить нейродетекторы не нужно -- я не пользуюсь ИИ. А вот чудо-детектор иметь бы хотелось. Для понимания, с чем имеешь дело. Я не только писать, я и читать нейротексты не намерена.
Полностью беседу (с примерами текста и промпта) можно почитать у меня в ТГ-канале. Я не уверена, что здесь разрешается давать прямые ссылки, но в профиле канал указан, если кому надо подробностей.
Но при таком раскладе эта музыка будет вечной. Слишком легко обходится заслонка.