"Is AI writing any good? Есть такой писатель фэнтези, Mark Lawrence. Он довольно популярен и время от времени организует различные активности. 2 года назад он организовал эксперимент с попыткой сравнить качество написания текстов реальными авторами и AI. Идеально было бы организовать написание длинных текстов, но их сложнее сравнивать, и людям может быть лень их читать, поэтому ограничились текстами в ~350 слов. 4 автора и ChatGPT 4, потом количество текстов стало 10. Промпт был ""write a piece of fiction based on `meeting a dragon`"", при этом для ChatGPT дали дополнительные инструкции. Потом это дали почитать желающим и попросили проголосовать в двух опросах: отранжировать тексты в порядке предпочтения и попробовать угадать написан текст AI или нет. Результат: в большинстве случаев (кроме двух) люди правильно угадали был ли автором AI (но лишь с небольшим перевесом), топ-2 и топ-3 по предпочтениям заняли тексты написанные AI (причём люди ошибочно считали, что топ-2 текст написан человеком). Результаты получились не особо радостные для авторов - топ два места из трёх у AI, в большинстве случаев люди не смогли чётко отличить AI от человека. И вот недавно был проведён второй раунд. Результаты и тексты. В написании текстов принимало участие 4 автора с общим тиражом проданных книг около 15 млн. Со стороны AI участвовал GPT-5 (не уточнено какая версия). Опять тексты по 350 слов. Для чистоты эксперимента предлагаю вам самим вначале прочитать тексты и проголосовать :) Какие же итоги? 964 голоса. Люди угадали правильно авторство трёх историй (1 AI, 2 автора), неправильно тоже три (2 AI, 1 автор) и два раза была ничья (1 AI, 1 автор). Получается по факту рандомное угадывание. Но ещё печальнее то, что средняя оценка сгенеренных историй выше, чем написанных людьми. И топ-1 место по предпочтениям - AI. Организатор опроса с печалью признаёт, что AI выиграл этот раунд. > Should AI generate fiction, imagery, voices etc competing with artists in a number of fields and fooling the public. No, of course not. I hate that idea and most people do too. > Will it happen? It's already happening. Wherever anyone can circumvent skill and heart and just profiteer off a new technology, they're going to do it. People threaten people with knives in the street for a few dollars - are people going to try to sell you AI books ... of course. > It's a huge shock to me that fiction which, in this test, scores higher than great authors who write wonderful stories full of soul and heart and wit and intelligence, can be generated by the multiplication of a relatively small number of not particularly large matrices. On the face of it it undercuts so many things we value about being human. В настоящий момент AI не может писать хорошие, последовательные истории большого размера, но прогресс не стоит на месте. И повторю, что промтп для написания историй был очень простой - если потратить больше времени на написание промта, результат будет ещё лучше. Обсуждение на reddit и ycombinator."
"Is AI writing any good? Есть такой писатель фэнтези, Mark Lawrence. Он…
Из этого канала
- #2781MathArena Apex: Unconquered Final-Answer Problems Авторы MathArena домерили…
MathArena Apex: Unconquered Final-Answer Problems Авторы MathArena домерили качество GPT-5, GPT-OSS и других моделей на совсем свежих математических…
- #2782Qwen-Image-Edit: Image Editing with Higher Quality and Efficiency (статья по…
Qwen-Image-Edit: Image Editing with Higher Quality and Efficiency (статья по Qwen-Image, модели в основе) С пылу с жару модель от Alibaba, заточенная на…
- #2790GPT-5 Pro работает очень хорошо на моих запросах и может делать достаточно…
GPT-5 Pro работает очень хорошо на моих запросах и может делать достаточно большое количество работы за один раз.
- #2779Но мне не совсем нравится этот анализ тем, что задач мало, и они во многом…
Но мне не совсем нравится этот анализ тем, что задач мало, и они во многом заезженные и типовые.
- #2778Measuring Thinking Efficiency in Reasoning Models: The Missing Benchmark Вот мы…
Measuring Thinking Efficiency in Reasoning Models: The Missing Benchmark Вот мы говорим, что модели рассуждают перед тем, как дать ответ.