Перевірка тексту на ІІ: як читати результат
Перевірка тексту на машинне походження — не вирок і не доказ, а оцінка ймовірності за набором ознак. Розуміти її обмеження важливіше, ніж знати цифру. Прогнати текст можна розширеним детектором, який враховує більше десятка метрик і показує їх окремо.
На що дивляться детектори
- Передбачуваність. Машинний текст в середньому рівніший: менше несподіваних слів і оборотів.
- Розкид довжини речень. У людини він більший.
- Повторюваність конструкцій і типових зв'язок.
- Бідність словника при формально правильній мові.
- Відсутність конкретики — імен, чисел, деталей, яких модель не знає.
Чому цифрі не можна вірити буквально
| Ситуація | Що покаже детектор |
|---|---|
| Живий текст у строгому діловому стилі | Часто високий «машинний» відсоток — стиль рівний за визначенням |
| Машинний текст після редагування | Зазвичай низький відсоток |
| Переклад людського тексту | Зміщується в бік «машинного» |
| Короткий фрагмент | Оцінка ненадійна: потрібен обсяг |
Як користуватися результатом
- Не гніться за нульовим відсотком — це не метрика якості.
- Дивіться на окремі метрики: одноманітність речень і бідний словник виправляються редагуванням.
- Додайте те, чого модель не придумає: цифри, приклади, власний досвід.
- Перевірте читабельність і тональність — читабельність, тональність.
- Якщо текст редагується під платформу — прибрати зайві символи детектором міток.
Навіщо взагалі проганяти текст через детектор
Не заради відсотка, а заради редагування: метрики підказують, де текст одноманітний, де бідний словник і де не вистачає конкретики. Це ті ж правки, які роблять матеріал зрозумілішим для людини, — просто знайдені швидше, ніж при читанні очима.
Наша позиція
Ми не приховуємо, що статті для публікацій генерує модель, і пояснюємо, навіщо їм все ж потрібна нормальна структура і зміст: від цього залежить, переживе публікація модерацію і потрапить до індексу. Докладно — в статті «Хто пише статті».