Análisis del agente con métricas personalizadas (versión preliminar)

[Este artículo es documentación preliminar y está sujeto a modificaciones].

Use lenguaje natural para definir hasta tres métricas personalizadas que quiera que Copilot Studio crear. Adapte las métricas personalizadas del agente para medir los resultados del agente y el impacto empresarial en los mensajes conversacionales. Las métricas personalizadas se calculan en función de las transcripciones de los mensajes del agente, incluido el contenido enviado en mensajes de Tarjetas adaptables.

Muestre las métricas personalizadas gráficamente como gráficos de anillos etiquetados en Métricas personalizadas en la página Análisis .

Propuesta de valor clave

Esta característica usa IA para crear un mensaje que calcule los resultados de una métrica personalizada que defina mediante lenguaje natural. La métrica se aplica a un muestreo de datos de mensajes conversacionales (sesión). Puede ajustar y realizar iteraciones sobre la métrica, antes de guardarla en su agente. Cree hasta tres métricas personalizadas por agente. Puede probar las métricas mediante datos de sesión de ejemplo y revisar los resultados mediante el razonamiento integrado. A continuación, puede refinar las métricas para reflejar mejor los resultados y el impacto empresarial.

Creación de una métrica personalizada

1. En la página Análisis del agente, seleccione Métricas personalizadas encima de la tarjeta Resumen .

   

2. En Crear una métrica personalizada, describa lo que desea medir en lenguaje sencillo, en términos de los resultados que desea rastrear en todas las conversaciones.

   

3. Para cada resultado posible que desee para la métrica que definió, agregue una categoría de resultados y describa cómo debe reconocer la inteligencia artificial cuando se produzca este resultado de métrica.

   Note

   • Para cada métrica, puede definir hasta 10 categorías de resultados.
   • Los resultados de sesión no coincidentes se asignan a la categoría predeterminada Other.

4. Seleccione Siguiente.

   La inteligencia artificial utiliza tus descripciones de métricas y resultados, y los metadatos existentes de tu agente, para crear una instrucción. El mensaje calcula los resultados de la nueva métrica en función de los datos de sesión. El icono de la nueva métrica personalizada aparece en la pestaña Vista previa .

5. Obtenga una vista previa e itere sobre el indicador de la métrica personalizada. El mensaje se usa para calcular los resultados de métricas personalizados.

Edición de una métrica personalizada

1. En la página Analytics del agente, seleccione los tres puntos (...) en el icono de métrica personalizada que desea editar y, a continuación, seleccione Editar.

2. En Crear una métrica personalizada, edite cualquiera de los valores siguientes según sea necesario:

   • ¿Cómo se define el resultado empresarial, en ¿Qué quiere medir?.
   • Cualquiera de las categorías de resultados, incluido el cambio del texto de cualquier categoría o la eliminación de una categoría.
   • Para agregar una nueva categoría de resultados, seleccione Agregar categoría.

3. Seleccione Siguiente y, a continuación, seleccione Guardar métrica.

4. Obtenga una vista previa e itere sobre el indicador de la métrica personalizada. El mensaje se usa para calcular los resultados de métricas personalizados.

Obtenga una vista previa e itere sobre el indicador de la métrica personalizada

Utiliza la funcionalidad de vista previa de la métrica personalizada para ajustar el indicador de tu métrica. Al probar tu métrica personalizada en el panel Crear una métrica personalizada, la métrica utiliza datos de un muestreo de hasta 20 sesiones.

1. En la primera página de Crear una métrica personalizada, seleccione Siguiente.

2. Seleccione Vista previa para ver el aspecto de la métrica personalizada cuando se muestra gráficamente en un icono.

   

3. Seleccione Resultados para ver una lista de resultados de los datos muestreados y una descripción del razonamiento de la inteligencia artificial para cada resultado.

   

4. Evalúe si el razonamiento y los resultados son correctos.

5. Seleccione Preguntar para ver una descripción de la comprensión de la inteligencia artificial de lo que desea que la métrica personalizada mida y calcule y con qué categorías de resultados. La pestaña Preguntar proporciona transparencia e información sobre lo que se usa la lógica subyacente para generar los resultados.

   

6. Si desea ajustar la solicitud para proporcionar resultados más precisos o más relevantes, realice ajustes en las entradas proporcionadas inicialmente en la primera página del panel Crear una métrica personalizada . A continuación, vuelva a probar el mensaje ajustado con los datos de ejemplo.

7. Seleccione Guardar métrica.

   El nuevo icono de métrica personalizada aparece en la página Analytics en Métricas personalizadas.

   Una vez creada la métrica, hay un cálculo único de la salida de la nueva métrica en función de los datos de sesión de los últimos siete días. Este cálculo inicial puede tardar algún tiempo en completarse, en función de cuántas sesiones tenga el agente. Después del cálculo inicial, hay un cálculo diario de los resultados de la métrica en función de los datos de las sesiones del día anterior. El cálculo diario se produce por la noche en la zona horaria y mantiene actualizada la métrica.

   Todos los cálculos, tanto iniciales como nocturnos, para las métricas personalizadas se realizan en una muestra de las sesiones y no en todas las sesiones del período de tiempo.

Eliminación de una métrica personalizada

1. En la página Analytics del agente, seleccione los tres puntos (...) en el icono de métrica personalizada que desea eliminar y, a continuación, seleccione Eliminar.

2. En el cuadro de diálogo de confirmación, seleccione Eliminar.