Melhorar os agentes ao utilizar a triagem e a remediação orientadas por avaliação

Criar um agente eficaz vai além de criar instruções e ligar dados e ferramentas. Após a implementação, as equipas devem avaliar, diagnosticar e melhorar continuamente o comportamento dos agentes para garantir que cumprem as expectativas de negócio, qualidade e segurança.

Este conjunto de artigos introduz uma estrutura prática para a fase de melhoria do ciclo de vida de desenvolvimento do agente. A estrutura ajuda a transformar os resultados de avaliação (pontuações, casos de teste falhados e regressões) em ações claras e prioritárias.

Utilize esta estrutura quando tiver resultados de avaliação e tiver de decidir o que fazer a seguir. Cenários comuns incluem:

  • Um conjunto de dados de avaliação pontua menos do que um limiar esperado.
  • Casos de teste específicos falham e a causa raiz não é clara.
  • As pontuações melhoram numa área, mas regridem noutra.
  • Vários conjuntos de avaliação falham e as prioridades não são claras.
  • O comportamento de um agente muda inesperadamente após uma atualização.

Esta estrutura assume que já tem resultados de aprovação ou reprovação para casos de teste individuais num ou mais conjuntos de avaliação.

Sugestão

Antes de utilizar esta estrutura de triagem e remediação, configure e execute avaliações para o seu agente. Saiba mais sobre como conceber uma estrutura de avaliação iterativa.

Passo seguinte

Compreender os objetivos do quadro de triagem e remediação, incluindo a sua estrutura e os princípios de conceção.

Compreender os objetivos da estrutura

  • Last updated on