A página de análise de dados do watsonx Assistant fornece um histórico das conversas do chatbot. Use para melhorar como seus assistentes entendem e respondem às solicitações do usuário; e para validar o desempenho do chatbot de processamento de linguagem natural (NLP).

Restrição: número de conversas nas quais o assistente pode satisfazer a solicitação do cliente sem intervenção humana.

Cobertura: número de conversas nas quais o assistente tem confiança de que pode atender à solicitação de um cliente.

Total de conversas: número total de conversas entre usuários ativos e seu assistente durante o período de tempo selecionado.

Média de mensagens por conversa: total de mensagens recebidas durante o período de tempo selecionado dividido pelo total de conversas durante o período de tempo selecionado.

Total de mensagens: número total de mensagens recebidas de usuários ativos durante o período de tempo selecionado.

Usuários ativos: número de usuários únicos que interagiram com seu assistente durante o período de tempo selecionado.

Média de conversas por usuário: total de conversas dividido pelo número total de usuários únicos durante o período de tempo selecionado.

Taxa de retenção: percentual de usuários que voltam a usar o chatbot durante o período de tempo selecionado.

Use a página Conclusão da ação para visualizar todos.

A página Visão geral do Analytics fornece um resumo das interações do chatbot.Você pode visualizar a quantidade de tráfego durante um período de tempo selecionado, bem como as intenções e entidades que foram reconhecidas com mais frequência nas conversas do usuário.

Você pode escolher suas métricas: se deseja visualizar a análise de dados do chatbot para um único dia, uma semana, um mês ou um trimestre. Em cada caso, os pontos de dados no gráfico se ajustam a um período de medição apropriado. Por exemplo, ao visualizar um gráfico de um dia, os dados são apresentados em valores por hora, mas ao visualizar um gráfico de uma semana, os dados são exibidos por dia. Uma semana sempre vai de domingo a sábado. Você também pode criar períodos de tempo personalizados, como uma semana que vai de quinta-feira à quarta-feira seguinte ou um mês que começa em qualquer data diferente do dia primeiro.

As ferramentas de análise do chatbot do Chatbot Analytics podem medir o número de mensagens individuais com compreensão fraca. Essas mensagens não são classificadas por intenção e não contêm entidades conhecidas. Analisar mensagens não reconhecidas pode ajudá-lo a identificar possíveis problemas de diálogo.

Use as métricas incorporadas para analisar os logs das conversas entre os clientes e seu assistente para avaliar o desempenho e identificar áreas que precisam ser melhoradas.

O painel de análise de dados do watsonx Assistant traz um histórico das conversas entre os usuários e o assistente implementado. Neste caso de uso, o histórico é usado para medir o número de usuários que interagem com o assistente.

Uma única conversa consiste de mensagens que um usuário ativo envia ao seu assistente e de mensagens que seu assistente envia ao usuário para iniciar a conversa ou responder. Se seu assistente começar dizendo “Oi, como posso ajudar você?” e, em seguida, o usuário fechar o navegador sem responder, essa mensagem será incluída na contagem total de conversas.

O painel de análise de dados do watsonx Assistant traz um histórico das conversas entre os usuários e o assistente implementado. Você pode usar esse histórico para determinar o número total de conversas e mensagens.

Para medir a restrição com precisão, a métrica deve ser capaz de identificar quando ocorre uma intervenção humana. A métrica usa principalmente o tipo de resposta Conectar a agente humano como indicador. Se um log de conversas do usuário incluir uma chamada para um tipo de resposta Conectar a agente humano, a conversa será considerada não restrita.

Um chatbot aciona uma mensagem de fallback quando não consegue responder de forma inteligente a uma mensagem recebida de um usuário.

Ao se integrar ao Watson Natural Language Understanding (NLU), você pode medir a análise de sentimentos.

Você pode visualizar os logs de uma versão de uma qualificação que está sendo executada em produção na guia Analytics de uma versão de desenvolvimento da qualificação. Conforme você encontra classificações erradas ou outros problemas, é possível corrigi-los na versão de desenvolvimento da qualificação e, em seguida, implementar a versão melhorada na produção após os testes. Consulte a página sobre como melhorar os assistentes para obter mais detalhes.