Analise o seu agente com métricas personalizadas (pré-visualização)

[Este artigo é documentação de pré-lançamento e está sujeito a alterações.]

Usa linguagem natural para definir até três métricas personalizadas que queres que o Copilot Studio crie. Adapte as métricas personalizadas do seu agente para medir os resultados e o impacto no negócio nas mensagens conversacionais. Mostre as suas métricas personalizadas graficamente como gráficos circulares tipo donut rotulados em Métricas Personalizadas na página Analytics.

Important

Este artigo contém documentação de pré-visualização do Microsoft Copilot Studio e está sujeito a alterações.

As funcionalidades de pré-visualização não se destinam a ser utilizadas em ambiente de produção e podem ter funcionalidades restritas. Esses recursos estão disponíveis antes de um lançamento oficial para que você possa obter acesso antecipado e fornecer feedback.

Se você estiver criando um agente pronto para produção, consulte Visão geral do Microsoft Copilot Studio.

Proposta de valor chave

Esta funcionalidade utiliza IA para criar um prompt que calcula os resultados de uma métrica personalizada que define usando linguagem natural. A métrica aplica-se a uma amostragem de dados de mensagens (sessões) conversacionais. Podes afinar e iterar a métrica antes de guardá-la no teu agente. Crie até três métricas personalizadas por agente. Pode testar métricas usando dados de amostra de sessões e rever resultados usando raciocínio incorporado. Depois, pode refinar as métricas para refletir melhor os resultados e o impacto no negócio.

Criar uma métrica personalizada

  1. Na página de Análises do seu agente, selecione Métricas Personalizadas acima do cartão de Resumo .

    Captura de ecrã do botão de métricas personalizadas na página de Análise.

  2. Em Criar uma métrica personalizada, descreva o que quer medir em linguagem simples, em termos dos resultados que pretende acompanhar em todas as conversas.

    Captura de ecrã do ecrã de descrição da métrica 'Criar uma métrica personalizada'.

  3. Para cada resultado possível que pretende para a métrica que definiu, adicione uma categoria de resultado e descreva como a IA deve reconhecer quando esse resultado da métrica ocorre.

    Observação

    • Para cada métrica, pode definir até 10 categorias de resultados.
    • Quaisquer resultados de sessão não correspondidos são mapeados para a categoria padrão Other.

  4. Selecione Seguinte.

    A IA usa as descrições da tua métrica e resultados, bem como os metadados existentes do teu agente, para criar um prompt. O prompt calcula os resultados da nova métrica com base nos dados da sessão. O bloco da nova métrica personalizada aparece no separador Pré-visualização .

  5. Pré-visualize e itere sobre o prompt da sua métrica personalizada. A instrução é utilizada para calcular os resultados da métrica personalizada.

Pré-visualize e itere no prompt da sua métrica personalizada

Use a funcionalidade de visualização personalizada da métrica para afinar o prompt da sua métrica. Ao testar a sua métrica personalizada no painel Criar uma métrica personalizada , a métrica utiliza dados de uma amostragem de até 20 sessões.

  1. Na primeira página de Criar uma métrica personalizada, selecione Próximo.

  2. Selecione Pré-visualização para ver como a sua métrica personalizada é exibida graficamente num mosaico.

    Captura de ecrã da visualização do mosaico métrico personalizado.

  3. Selecione Resultados para ver uma lista de resultados dos dados amostrados e uma descrição do raciocínio da IA para cada resultado.

    Captura de ecrã dos resultados de métricas personalizadas a partir de dados de exemplo.

  4. Avalie se o raciocínio e os resultados estão corretos.

  5. Selecione Prompt para ver uma descrição da compreensão da IA sobre o que pretende que a métrica personalizada meça e calcule e com que categorias de resultados. O separador Prompt oferece transparência e insights sobre qual a lógica subjacente que está a ser usada para gerar os resultados.

    Captura de ecrã do separador de Prompt de 'Criar uma métrica personalizada' mostrando o prompt gerado pela IA.

  6. Se quiser ajustar o seu prompt para dar resultados mais precisos ou relevantes, faça ajustes aos inputs que inicialmente forneceu na primeira página do painel Criar uma métrica personalizada . Depois testa novamente o prompt ajustado com os dados da amostra.

  7. Selecione guardar métrica.

    O novo mosaico de métricas personalizadas aparece na página de Análises , em Métricas Personalizadas.

    Depois de criada a métrica, há um cálculo único da saída da nova métrica com base nos dados da sessão dos últimos sete dias. Este cálculo inicial pode demorar algum tempo a ser concluído, dependendo do número de sessões que o agente tem. Após o cálculo inicial, há um cálculo diário da saída da sua métrica com base nos dados das sessões do dia anterior. O cálculo diário ocorre à noite, no teu fuso horário, e mantém a tua métrica atualizada.

    Todos os cálculos, tanto iniciais como noturnos, para métricas personalizadas são realizados numa amostra das sessões e não em todas as sessões do período de tempo.

Eliminar uma métrica personalizada

  1. Na página de Análises do seu agente, no mosaico de métrica personalizada que quer eliminar, selecione os três pontos (...) e depois selecione Eliminar.

  2. No diálogo de confirmação, selecione Eliminar.

  • Last updated on