Чому нейромережа зациклюється на одних словах
Мовна модель обирає наступне слово як найімовірніше продовження тексту, який уже написано, включно з її власними попередніми фразами. Якщо на початку відповіді вона використала вдалу, на її «думку», конструкцію — наприклад, «важливо зазначити» або «відіграє важливу роль», — та сама конструкція стає ймовірним продовженням і далі, бо модель ніби орієнтується на власний стиль у межах однієї відповіді. Чим довший текст, тим помітніший цей ефект: у короткому повідомленні повтор одного слова не привертає уваги, а в тексті на п'ять-сім абзаців одна й та сама зв'язка чи один і той самий зворот починає заважати читанню. Проблему посилює й те, що в багатьох тем за визначенням обмежений набір «безпечних» загальних формулювань, і модель охоче повертається саме до них, якщо ви не задали інших умов. Схожа картина виникає і під час генерації списків: якщо перший пункт починається зі слова «використовуйте», спокуса почати так само і всі інші пункти дуже велика, бо модель тримається одного разу обраного шаблону, доки ви явно не попросите його зламати. Це пояснює і ще одну поширену скаргу: при повторному запиті на ту саму тему в новому чаті нейромережа видає майже такий самий текст, як і минулого разу, — вона знову обирає найімовірніше продовження, а ймовірності для конкретної теми від чату до чату змінюються слабко, якщо ви не задаєте нових умов.
Які повтори трапляються найчастіше
Повтори бувають різного масштабу, і корисно розрізняти їх, щоб точніше пояснити нейромережі, що виправити. Перший тип — повтор одного й того самого слова чи словосполучення: «важливо», «варто зазначити», «відіграє ключову роль» через кожні кілька рядків. Другий тип — повтор структури речення: кілька фраз підряд починаються однаково, наприклад дієприслівниковим зворотом або однією й тією ж вставною конструкцією. Третій тип — повтор думки іншими словами: абзац здається новим, але по суті переповідає те саме, що було сказано рядком вище. Четвертий — шаблонні вступи і висновки, які мандрують з тексту в текст незалежно від теми. Якщо ви зможете назвати, який саме тип повтору вас турбує, нейромережі буде легше його прибрати.
Як сформулювати запит, щоб повторів було менше
Загальне прохання «не повторюйся» працює слабко, бо модель не завжди може сама помітити власні повтори без конкретної підказки. Краще вказати пряме обмеження: «не використовуй одне й те саме слово частіше одного разу на абзац», «не починай два речення підряд однаковою конструкцією», «уникай слів «важливо», «варто зазначити», «відіграє роль»». Корисно заздалегідь назвати слова-паразити, які найчастіше заважають саме вам: у різних людей накопичуються різні звороти. Ще один робочий прийом — попросити писати коротше і конкретніше: «кожне речення має нести нову думку, без переказу попереднього». Чим точніше ви описуєте, який саме повтор заважає, тим вищий шанс отримати текст без нього з першої спроби. Можна піти далі і показати приклад бажаного стилю: вставте абзац, який вам подобається за різноманітністю мови, і попросіть писати у схожій манері. Зразок працює надійніше, ніж довгий словесний опис, бо моделі простіше скопіювати видиму структуру тексту, ніж вгадати її із загального побажання «пиши живіше».
Що робити, якщо текст уже готовий і в ньому є повтори
Якщо відповідь уже отримана і в ній помітні повтори, не потрібно переписувати її вручну з нуля — простіше попросити нейромережу відредагувати власний текст. Напишіть: «знайди в цьому тексті слова та конструкції, що повторюються, і перепиши так, щоб кожне речення звучало інакше». Можна піти точніше: «слово «важливо» зустрічається чотири рази, заміни на синоніми або перебудуй фрази». Добре працює і такий прийом: попросіть нейромережу спочатку скласти список слів і зворотів, які повторюються в тексті, а потім окремим кроком переписати текст з урахуванням цього списку. Розбивка на два кроки майже завжди дає чистіший результат, ніж прохання «виправ усе й одразу», бо модель спочатку явно фіксує проблему, а потім вирішує її прицільно. Якщо після такої правки повтори залишилися, не соромтеся повторити прохання ще раз із зазначенням, що саме залишилось: модель не ображається на уточнення і зазвичай справляється з другої чи третьої спроби краще, ніж з першої.
Як не допустити повторів у довгих текстах і в проєкті загалом
Чим довший документ, тим вищий ризик, що та сама фраза повернеться в середині і в кінці, особливо якщо текст збирався частинами в різних повідомленнях. Якщо ви пишете великий матеріал шматками, тримайте під рукою список формулювань, які вже використовувалися, і додавайте його до наступного запиту з позначкою «ці слова і звороти вже траплялися, не повторюй їх». Інший варіант — після збирання всього тексту попросити нейромережу прочитати весь документ і окремо виділити місця, що повторюються, перш ніж редагувати: так перевірка охоплює весь обсяг, а не лише останній надісланий фрагмент. Для регулярних завдань — листів, описів, карток товарів — зручно один раз скласти список заборонених штампів і вставляти його в кожен новий запит як постійну умову. Якщо проєкт ведуть кілька людей і матеріали пишуться в різних чатах, варто домовитися про єдиний список заборонених фраз для всіх: інакше один автор прибирає штампи, а повтор все одно спливає в тексті колеги, зібраному окремо.
Як зробити текст живим, а не просто без повторів
Прибрати повтори — не те саме, що зробити текст цікавим: можна позбутися одного слова і отримати той самий зміст, але іншими синонімами, і текст все одно звучатиме сухо. Щоб оживити формулювання, попросіть урізноманітнити довжину речень: нехай короткі чергуються з більш розгорнутими. Попросіть замінити загальні слова на конкретні: не «відіграє важливу роль», а що саме це дає читачеві. Можна явно задати інтонацію: «пиши як людина, яка пояснює другу, а не як довідник». Корисно також попросити нейромережу навести приклад або порівняння замість чергового абстрактного твердження — це природним чином відводить від шаблонних зворотів і робить текст живішим і конкретнішим. Добре працює і прийом «прочитай вголос»: попросіть нейромережу уявити, що текст читають вголос, і прибрати фрази, які на слух звучать як штамп з рекламної брошури. Таке формулювання завдання перемикає модель з перебору звичних зворотів на оцінку того, як текст сприймається живою людиною. У результаті текст без повторів і живий текст — це дві різні, але пов'язані цілі: першу вирішує точна заборона на конкретні слова і конструкції, а другу — прохання про приклади, інтонацію і різну довжину фраз. Поєднання обох прийомів зазвичай дає результат, який приємно читати.