AI vs. Professional Authors Results
- Повторю: я ненавижу, что ИИ умеет писать; авторы работают в романах, а не в микро-историях, где ИИ сейчас силён.
- Зачем флеш? Проверяем «точку разлома»: если стекло бьётся от пинг-понга, это важнее, чем сравнение с анвилом.
Участники: Robin Hobb, Janny Wurts, Christian/Miles Cameron и я — суммарно 15 млн проданных книг.
Оценки: два года назад 6 из 8 текстов получили ≤ 3 звёзд; сейчас 5 из 8 ≥ 3. Короткие формы всё равно недолюбливают читатели романов.
Голосование: 964 человека начали, 474 дошли до конца.
- В среднем публика ошибалась в 3 случаях, угадывала 3, «не решалась» 2 — монета не хуже.
- ChatGPT тоже промахнулся, хотя сам сочинял тексты.
Оценки (1–5)
| № | Автор | Ср. балл |
|---|---|---|
| 1 | ИИ | 4.3 |
| 2 | ИИ | 3.9 |
| 3 | Человек | 3.7 |
| 4 | Человек | 3.6 |
| 5 | ИИ | 3.5 |
| 6 | Человек | 3.4 |
| 7 | ИИ | 3.3 |
| 8 | Человек | 3.2 |
Итог: ИИ не только выдал самый высокий балл, но и в среднем обогнал людей. Один из авторов, попробовавший угадать, ошибся 4 раза из 5 и поставил два ИИ-рассказа на верхние места.
Вывод: тест не претендует на научность, но показывает, что за два года ИИ стал убедительнее в микро-формате, а читатели (и сами авторы) его не отличили.