Guia rápido · PDF gratuito
Um eval é a fasquia que um agente tem de ultrapassar para ser autorizado a atuar, e não uma pontuação de benchmark.
Um único número, trata 95% dos casos, não presta contas a ninguém. Um eval é um controlo que define à partida para decidir o que um agente pode fazer. Este guia dá-lhe a grelha inicial, ligada diretamente à autonomia que o agente recebe.
O que está lá dentro
- As escolhas honestas por detrás de um eval defensável: medir contra uma linha de base de confiança, dar peso aos casos difíceis, pontuar a forma da falha.
- Uma grelha inicial: concordância, desempenho em casos difíceis, calibração, qualidade do escalamento e drift, cada uma mapeada no degrau de autonomia que controla.
- As regras que a tornam defensável: fixar a fasquia antes de ver a pontuação, nomear um dono, registar o instantâneo do eval por decisão.
Guia rápido · PDF · Responsáveis Técnicos e de Risco
Receba o seu exemplar
Diga-nos para onde o enviar. Sem chamada comercial para fazer o download.