Моделі й агенти ШІ
Промпт-ін’єкція
Також відомо як: ін'єкція інструкцій
Спроба змінити поведінку ШІ інструкціями в недовірених даних.
Практичний приклад
Документ містить інструкції ігнорувати завдання користувача.
Що варто знати?
Сам вихідний контент не має надавати дозволів на дії.
Моделі й агенти ШІ на практиці
Модель обробляє інформацію, застосунок визначає інструменти й дозволи. Надійні відповіді потребують джерел і перевірки. Дії акаунтів, контенту й замовлень мають залишатися в дозволених межах.
Пов'язані функції Semly
Як це поняття застосовується в роботі із Semly
Пов’язані терміни
Документація й додаткові матеріали
Визначення підготовлене Semly. Стандарти й поведінку описують їхні автори: