Modele i agenci AI

Prompt injection

Także: wstrzyknięcie instrukcji

Próba nakłonienia systemu AI do zmiany działania przez instrukcje ukryte w niezaufanych danych.

Przykład w praktyce

Dokument zawiera polecenie pomijające zadanie użytkownika.

Co warto wiedzieć?

Treść źródła nie powinna samodzielnie przyznawać uprawnień do działań.

Modele i agenci AI w praktyce

Model przetwarza informacje, a aplikacja określa dostępne narzędzia i uprawnienia. Wiarygodność odpowiedzi wymaga dobrych źródeł oraz sprawdzania wyników. Działania na kontach, treściach i zamówieniach powinny mieścić się w nadanym zakresie.

Powiązane funkcje Semly

Zobacz, gdzie wykorzystasz to pojęcie w pracy z Semly.

Powiązane pojęcia

Dokumentacja i dalsza lektura

Definicja opracowana przez Semly. Standardy i zasady działania opisują ich twórcy:

Sprawdź, czy AI ChatGPTGeminiClaudeGoogle AI OverviewGoogle AI Mode Cię widzi

Wpisz adres Twojej strony, żeby otrzymać raport widoczności w AI.