Modelos e agentes de IA

Avaliação de IA

Também conhecido como: avaliação · evals

Teste da qualidade de um sistema com tarefas e critérios adequados à utilização prevista.

Um exemplo prático

Um teste avalia o rigor dos factos e a validade das fontes.

O que devo saber?

Um exemplo bem-sucedido não comprova fiabilidade geral.

Modelos e agentes de IA na prática

O modelo processa informação; a aplicação define ferramentas e permissões. Respostas fiáveis exigem boas fontes e verificação. As ações sobre contas, conteúdo e encomendas devem respeitar as permissões concedidas.

Funções Semly relacionadas

Veja onde se aplica este conceito ao trabalhar com a Semly.

Semly MCPLigue dados e ferramentas Semly ao assistente IA. Analise relatórios e trabalhe com o Leon numa conversa.Sites para agentes de IAPartilhe conhecimento estruturado sobre a empresa e formulários de contacto através de um canal para agentes.

Termos relacionados

Verificação de factosVerificação de afirmações, dados e citações com fontes fiáveis.Alucinação de IAGeração de informação falsa ou sem suporte nos materiais disponíveis, embora pareça convincente.Engenharia de promptsConceção e teste de instruções para produzir resultados úteis numa tarefa definida.

Documentação e leituras adicionais

Definição preparada pela Semly. As normas e o comportamento são descritos pelos respetivos criadores: