Analytics del Helper
Después de entrenar las interacciones y los diálogos del Helper, debe monitorear las interacciones de su asistente con los usuarios para asegurarse de que responda de manera efectiva a las solicitudes y, por lo tanto, garantice su calidad y asertividad.
Estas interacciones se pueden visualizar en la opción Analytics. Es la sesión de la plataforma encargada de visualizar los informes e indicadores. Los módulos se dividen de la siguiente manera: Lista de Conversaciones, Ranking de Intents, Ranking de Respuestas y Ranking de Fallback.
Antes de Empezar
Es necesario completar al menos una capacitación;
Y haber realizado al menos una interacción con el asistente virtual.
Procedimiento
- Después de acceder a la plataforma, acceda al menú "Analytics";
Seleccione uno de los módulos disponibles: Listar Conversaciones, Ranking de Intents, Ranking de Respuestas y Ranking de Fallback.
Listar Conversaciones
En este módulo es posible visualizar todas las conversaciones realizadas por el chatbot durante un intervalo de tiempo seleccionado. El sistema mostrará información sobre las conversaciones realizadas durante este período.
Después de hacer clic en "Lista de Conversación", primero es obligatorio definir un período de tiempo en el campo "Intervalo".
Después de establecer un tiempo, haga clic en "Filtrar".
La herramienta presentará la información de la conversación según la hora que elijas.
Tendremos la siguiente información para su análisis:
Campo | Descripción |
|---|---|
Fecha y hora | La fecha y hora en que tuvo lugar la conversación entre un usuario y el asistente. |
Versión | La versión variará dependiendo de la madurez del chatbot. Esto significa que la versión del asistente cambia según la cantidad de información que recibe y el entrenamiento al que se somete. |
Canal | El canal que el usuario usó para la conversación. Puede ser desde diferentes canales, según se configure en la plataforma Helper. Por ejemplo: Facebook, Twitter, Smart Chat, entre otros. |
Identificación de Usuário | La identificación del usuario que habló con el asistente. |
Además, también presenta dos opciones:
Campo | Descripción |
|---|---|
Ver | Nessa opção é possível ver o detalhamento da conversa entre o usuário e o assistente. O balão de cor azul é a mensagem do usuário. Podemos ver que abaixo dele existe uma porcentagem, que significa a acurácia da assistente e, ao lado, a intent que foi entendida pelo Helper. Caso queira incluir essa frase do usuário à intent entendida, basta clicar nela que você será redirecionado para a página de diálogos. Já o balão de cor branca é a mensagem enviada pelo assistente. Abaixo dele a habilidade que foi cadastrada para esse tipo de intent. Caso queira incluir algo novo dessa conversa para a habilidade, basta clicar nela e você também será redirecionado para a página de diálogos. Além disso, também são apresentadas as opções "Atualizar", caso a conversa ainda esteja acontecendo e você queira receber as novas mensagens; "Exportar" para realizar o download dessa conversa; e "Voltar" para voltar a página anterior. |
Download | Es posible descargar la conversación en formato xls, donde podrás ver las interacciones entre usuario y chatbot. |
Ranking de Intents
En esta modalidad es permitido verificar en formato de gráfico en cuáles los intents están siendo más utilizadas por los usuarios del sistema, o sea, lo que los usuarios están más preguntando y/o demandando del asistente.
Después de hacer clic en "Ranking de intents", es obligatorio establecer un periodo de tiempo en el campo "Intervalo". Después de establecer un tiempo, haga clic en "Filtrar".
Se mostrará un gráfico con las intents principales según el período seleccionado. En el lado izquierdo está el gráfico en sí, en días, y en el lado derecho el subtítulo de lo que representan los colores y sus determinados intents.
Al final de cada intent hay una lupa. Al hacer clic en esta lupa, se le dirigirá a la página de lista de chat de esa intent, que mostrará la lista dependiendo del período informado para el gráfico.
Además, al hacer clic en algún intent del subtítulo, se le dirigirá a la página de diálogo relacionado, donde es posible analizar si las frases son correctas o hacer algún cambio.
Ranking de Respuestas
Funciona de manera similar a el Ranking de Intents. En este modo, es posible verificar qué habilidades están siendo más utilizadas por los usuarios del sistema, o sea, lo que más responde el asistente durante la interacción con el usuario.
Después de hacer clic en "Ranking de Respuestas", es obligatorio definir un período de tiempo en el campo "Intervalo". Después de establecer un tiempo, haga clic en "Filtrar".
Se presentará un gráfico con las principales competencias según el periodo seleccionado. En el lado izquierdo está el gráfico en sí, en días, y en el lado derecho está el subtítulo de lo que representan los colores y sus habilidades específicas.
Al final de cada habilidad hay una lupa. Al hacer clic en esta lupa, lo llevará a la página de la lista de conversaciones para esa habilidad, que mostrará la lista según el período ingresado para el gráfico.
Además, al hacer clic en cualquier habilidad en el subtítulo, se lo dirigirá a la página de diálogo relacionada, donde puede analizar si las oraciones estan correctas o realizar cambios.
Ranking Fallback
En esta modalidad, podemos comprobar cuáles son los intents que el sistema no pudo entender, es decir, qué interacciones con el usuario no fueron satisfactorias porque el asistente no pudo entender el propósito del mensaje.
El fallback, para el sistema, es una habilidad previamente registrada que presenta un mensaje como respuesta al usuario, creado por un administrador de la plataforma con el fin de informar al usuario que el asistente no tiene suficientes conocimientos registrados y capacitados para responder a la solicitud.
Después de hacer clic en "Ranking fallback", es obligatorio definir un período de tiempo en el campo "Intervalo". Después de establecer un tiempo, haga clic en "Filtrar".
Se presentará un gráfico con las habilidades de fallback que no entendió el asistente, según el período seleccionado. En el lado izquierdo está el gráfico en sí, en días, y en el lado derecho está el subtítulo con la habilidad de fallback.
Al hacer clic en el subtítulo del fallback, accederá a la página de la lista de conversaciones para esa habilidad, según los días seleccionados en el filtro de intervalo. Al ver estas conversaciones, el analista puede verificar si la falta de comprensión del asistente es correcta. O sea, si el usuario está demandando algo fuera del alcance de su creación o si es una carencia, y así el administrador puede mejorar su interacción y precisión, construyendo nuevos flujos de conversación o refinando los existentes.