Розробка промптів для коректної роботи діалогових інтелектуальних чатів

Abstract

Об’єкт дослідження – процес комунікативної взаємодії між користувачем та діалоговим інтелектуальним чатом на основі великої мовної моделі, що охоплює формулювання запиту, генерування відповіді та оцінювання результату. Предмет дослідження – методи, прийоми та шаблони формулювання промптів, а також критерії оцінювання їх ефективності з погляду коректності, релевантності, повноти, структурованості, відповідності формату та відсутності фактичних вигадок у відповідях чатів. Мета роботи – розробити, систематизувати та експериментально перевірити набір промптів для підвищення коректності, релевантності та структурованості відповідей діалогових інтелектуальних чатів у типових сценаріях взаємодії з користувачем. У роботі розглянуто сучасні підходи до побудови діалогових інтелектуальних систем, визначено роль промптів у керуванні поведінкою мовних моделей, проаналізовано типові причини некоректних відповідей чат-ботів. Сформовано критерії оцінювання якості відповідей, розроблено класифікацію промптів за призначенням та створено шаблони для різних сценаріїв діалогової взаємодії. Практична частина передбачає тестування відповідей ChatGPT на основі моделі gpt-4o-mini-2024-07-18 до та після застосування оптимізованих промптів, порівняння результатів і формування рекомендацій щодо використання промпт-інженерії. Гіпотеза дослідження полягає в тому, що структуровані промпти, які містять роль моделі, контекст, формат відповіді та обмеження, підвищують якість відповідей порівняно з неструктурованими запитами.