«Різні детектори дають різні результати» — кому вірити

Запитання

Я прогнав той самий текст через три сервіси й отримав 12 %, 58 % і 94 %. Хіба така різниця можлива? Кому вірити?

Коротка відповідь

Жодне з цих чисел не є тим, у що варто «просто вірити». І такий розкид — не виняток, а звичайна річ.

Чому так по-різному

1. Різні критерії

Кожен інструмент по-своєму зважує, якому аспекту стилю надати більшої ваги. Текст той самий, акценти різні — тож і результати розходяться. Це не вимірювання температури, а радше оцінка «наскільки цей текст гладкий» за власною лінійкою кожного сервісу.

2. Різні дані, на яких їх налаштовано

Інструмент, зроблений переважно під англійську, на українському тексті поводиться нестабільно. Українська має власну систему відмінювання та словотвору й вільніший порядок слів — англійські сигнали не переносяться на неї механічно.

3. Чутливість до довжини

Що коротший текст, то більший розкид. Коли речень лише три-чотири, для статистики немає підстав. Саме тому початок і кінець того самого тексту, подані окремо, дають різні оцінки.

4. Результат — це не ймовірність

Найчастіше непорозуміння саме тут. «94 %» не означає «ймовірність 94 %, що це написав ШІ». Це радше сила сигналу, до того ж кожен сервіс кладе цю величину на власну шкалу. Ці числа взагалі не призначені для порівняння між собою.

То на що дивитися

Не намагайтеся вивести середнє. Натомість дивіться на фрагменти, які позначили всі інструменти разом.

Якщо три сервіси вказали на той самий абзац, це означає, що абзац справді читається пласко. Бали різні, але у висновку про те, де саме «чіпляється», збіг трапляється часто.

І до цього абзацу поставте таке запитання:

Чи є тут моє судження або конкретний факт?

Це значно практичніша інформація, ніж бал.

Не використовуйте це як матеріал для виправдання

Коли людину запідозрили, вона іноді приносить результат того сервісу, що дав низький бал. Це майже не працює. Співрозмовник теж знає, що результати різняться, і навпаки — сам факт прогону через кілька сервісів може справити погане враження.

Пояснюються не оцінками, а процесом: чернетка, історія версій, джерела. Докладно — у матеріалі Вас запідозрили у використанні ШІ.

Якщо все-таки обирати інструмент

За точністю бала обрати важко — її ніяк не перевірити. Практичніше дивитися на інше.

• чи дає він позначення за реченнями (сервіси, що видають лише загальний бал, малокорисні)
• чи розрахований він на українську мову
• чи уникає категоричних формулювань (сервісів, що заявляють «текст написав ШІ», варто остерігатися)
• чи пояснює, як він поводиться з вашим текстом

Детектор ШІ показує аналіз за реченнями й подає результат як довідкову ймовірність ШІ. Пояснення щодо тлумачення результату зібрані також у розділі FAQ.

Наостанок

Жоден інструмент не встановлює авторства. Замість перейматися різницею балів, корисніше виробити звичку відкривати позначені фрагменти — саме це справді покращує текст.

Чому шкідливо робити бал самоціллю, розібрано в матеріалі Коли метою стає низька оцінка, текст псується.