Avaliação mensal do chatbot com IA generativa: 91% de acertos

Facebook Facebook Facebook Facebook Compartilhar

O último período analisado do chatbot de IA generativa da AOC (de 15 de março a 14 de abril de 2025) obteve resultados excepcionais, igualando os melhores dados registrados durante a avaliação de janeiro.

Esta avaliação baseia-se numa análise abrangente de 150 conversas, selecionadas aleatoriamente e realizadas em diferentes horários do dia, garantindo uma visão completa e... representadesempenho do chatbot.

Neste caso, na última revisão, o chatbot obteve uma taxa de acerto de 91,33% (137 acertos e 13 erros). Os serviços da AOC mais consultados foram os seguintes:

  1. IdCAT Dispositivos móveis (30,67%)
  2. IdCAT Certificado (16,67%)
  3. Enotum (% 15,33)
  4. Efact (0.67%)

Os 36% restantes foram consultas fora do escopo dos serviços do AOC.

Metodologia de avaliação

A avaliação é realizada mensalmente, analisando 150 conversas selecionadas aleatoriamente. Cada conversa é revisada para determinar se o chatbot respondeu corretamente ao problema levantado pelo cidadão.

A análise das conversas em diferentes horários do dia nos permitiu identificar que o chatbot mantém um desempenho constante, independentemente do horário do dia em que a interação ocorre.

conclusão

Os resultados deste mês de março correspondem aos melhores dados registrados em janeiro (91,33%) e isso reforça a confiança na capacidade do chatbot de oferecer um serviço de qualidade de forma contínua e uma alternativa ao suporte tradicional.

Além disso, cabe destacar que durante o mês de fevereiro foi publicado o post sobre o aumento do número de solicitações gerenciadas pelo serviço de suporte . Esses resultados destacam a importância da IA ​​na melhoria dos serviços públicos e sua capacidade de se adaptar às necessidades dos usuários.

Você também pode conferir as seguintes notícias relacionadas ao chatbot:

Publicado em