Skip to main content

Interpretando métricas de uso e adoção para GitHub Copilot

Copilot métricas de uso e de adoção revelam padrões na forma como os desenvolvedores interagem com Copilot em toda a empresa.

Quem pode usar esse recurso?

Proprietários corporativos, administradores da organização, gerentes de cobrança e pessoas com uma função personalizada da empresa com a permissão "Exibir Métricas da Empresa Copilot ".

Depois de exibir o Copilot painel de métricas de uso, você pode usar este artigo para interpretar cada gráfico e identificar oportunidades para aumentar a adoção e o envolvimento.

Use os principais gráficos de uso no painel para entender os padrões gerais de adoção e engajamento. Esses gráficos ajudam você a identificar onde o uso está crescendo, nivelando ou diminuindo, para que você possa tomar medidas para manter o envolvimento.

MétricaO que ele mostraComo interpretá-lo
DAU (usuários ativos diários) do IDEUsuários exclusivos que interagiram com Copilot cada dia.O crescimento sustentado da DAU sinaliza uma participação consistente; quedas acentuadas podem indicar problemas de configuração ou juros reduzidos.
WAU (usuários ativos semanais) do IDEUsuários únicos ativos em um período contínuo de 7 dias.Uma relação íntegra entre o número de usuários e o número de licenças (>60%) indica um uso contínuo e intenso.
Taxa de aceitação de conclusões de códigoPorcentagem de sugestões aceitas.Uma taxa crescente sugere aumentar a confiança e a utilidade; uma queda pode apontar para sugestões incompatíveis ou atrito de fluxo de trabalho.

Revisão da adoção de recursos

Os gráficos "Solicitações por modo de chat" e "Adoção do agente" mostram como os desenvolvedores estão usando Bate-papo do Copilot e agente do Copilot.

SinalO que isso te dizO que procurar
Solicitações por modo de chatDetalhamento das interações de chat por modo — Perguntar, Editar, Planejar ou Agente.Uma distribuição equilibrada sugere que os usuários estão explorando vários recursos. O uso intenso de um modo pode realçar onde a habilitação deve se concentrar.
Adoção do agentePercentual de usuários ativos que usaram agente do Copilot.O crescimento ao longo do tempo mostra que os desenvolvedores estão progredindo de completamentos básicos para recursos mais avançados Copilot.

Revisão da adoção do modelo

Os gráficos "Uso de modelo por dia" e "Uso de modelo por modo de chat" ajudam você a entender quais modelos de IA são usados com mais frequência.

GráficoDescriptionPercepções para extrair
Utilização do modelo por diaMostra quais modelos de IA alimentam a atividade Bate-papo do Copilot.Identifique se os usuários estão se envolvendo principalmente com modelos padrão ou experimentando com os mais recentes.
Uso de modelo por modo de chatAnalisa o uso do modelo por modo de chat (Perguntar, Editar, Planejar, Agente).Monitore como a adoção do modelo evolui à medida que novos modelos são lançados.

Observação

Atualmente, os gráficos de uso do modelo representam apenas a atividade de chat. Os dados de conclusão não estão incluídos nos detalhamentos do modelo.

Revisão do uso do idioma

Os gráficos "Uso de linguagens" e "Uso de linguagens por dia" mostram quais linguagens de programação os desenvolvedores usam com mais frequência com Copilot.

GráficoDescriptionComo usar
Uso do idiomaMostra a distribuição da atividade de Bate-papo do Copilot por linguagem de programação.Identifique onde Bate-papo do Copilot fornece mais valor e onde o suporte ou habilitação adicional pode ajudar.
Uso de idioma por diaAcompanha as flutuações diárias na atividade de linguagem.Detectar mudanças no foco de desenvolvimento ou confirmar se novas equipes ou projetos estão impulsionando o aumento da atividade.

Análise de coortes de adoção

A distribuição das coortes de adoção do painel de impacto mostra a proporção de usuários em cada fase e como essa distribuição muda ao longo do tempo. Para saber o que cada fase significa e como a classificação funciona, consulte Métricas de uso do GitHub Copilot.

SinalO que ele sugereAção sugerida
Reduzindo a participação da Fase 1, aumentando a participação da Fase 2 ou da Fase 3Os usuários estão progredindo de conclusões de código para fluxos de trabalho controlados por agente.Continue com a capacitação atual; considere compartilhar histórias internas de sucesso para manter o ritmo.
Alta ou crescente proporção de usuários inativosMuitos usuários licenciados ainda não atingiram o limite de envolvimento de uma fase.Verificar a atribuição de licença e a configuração do IDE; oferecer integração para reengajar usuários inativos. Verifique também se os usuários afetados dependem principalmente de uma superfície que não faz parte dos critérios de classificação de qualquer fase, como Bate-papo do Copilot em GitHub.com.
Progressão paralisada da Fase 1 para a Fase 2Os usuários se sentem confortáveis com completions e chat, mas ainda não adotaram interfaces de agente.Siga um cartão de recomendação, como configurar agente de nuvem Copilotou executar uma demonstração de fluxos de trabalho do agente.
Progressão paralisada da Fase 2 para a Fase 3Os usuários adotaram uma interface de agente, mas não adicionaram interfaces de agente adicionais.Siga um cartão de recomendação, como habilitar Revisão de código do Copilot, para introduzir uma segunda superfície de agente.
A fase de um usuário muda de um dia para o outro sem uma alteração em seus hábitosA atribuição de fase é recalculada diariamente com base na janela móvel dos últimos 28 dias, de modo que a fase de um usuário muda à medida que os dias mais antigos saem dessa janela.Esse é o comportamento esperado, não um erro de dados; nenhuma ação necessária.

Quando você vir um cartão de recomendação no painel, como configurar agente de nuvem Copilot, habilitar Revisão de código do Copilot ou enviar um lembrete de integração inicial, siga as instruções no link para concluir a configuração. Cada recomendação é gerada a partir da distribuição de coorte atual da sua organização e tem como alvo a lacuna mais provável para mover os usuários para uma adoção mais profunda.

Revisando o multiplicador de adoção

O multiplicador de adoção compara usuários envolvidos (Fase 1, 2 ou 3) com usuários passivos no código enviado (solicitações de pull mescladas por usuário por mês) e tempo para mesclar solicitações de pull. Isso mostra o impacto relativo de uma adoção mais profunda, independentemente de quantos usuários se enquadram em cada fase.

SinalO que ele sugereAção sugerida
Usuários envolvidos mesclam mais solicitações de pull por usuário por mês do que usuários passivosUma maior adoção Copilot está associada a uma produtividade individual mais alta.Use esta comparação para sustentar o argumento a favor do investimento contínuo em capacitação.
Usuários envolvidos mesclam menos solicitações de pull por usuário por mês do que usuários passivosOs usuários envolvidos podem estar gastando mais tempo em trabalhos maiores ou mais complexos, ou a comparação pode refletir diferenças na composição da equipe em vez da profundidade de adoção.Cruze com a distribuição por coorte de adoção e com os dados no nível da equipe antes de tirar conclusões; evite tratar o multiplicador como uma medida autônoma de produtividade.
Usuários envolvidos mesclam solicitações de pull mais rápido do que usuários passivosUma maior adoção está associada a um ciclo de vida mais curto de uma pull request.Use essa comparação juntamente com as métricas de ciclo de vida da solicitação de pull para avaliar o impacto geral da entrega.
O multiplicador se mantém estável apesar do crescimento na participação da Fase 2 ou da Fase 3A adoção do agente ainda não resultou em uma diferença mensurável nos resultados entre usuários engajados e passivos.Verifique se o uso do agente está concentrado em alguns usuários ou equipes e se o tempo suficiente passou desde a distribuição para que o impacto seja mostrado.

Observação

O multiplicador de adoção compara duas populações diferentes de usuários, não os mesmos usuários ao longo do tempo. Diferenças na composição de equipe, complexidade do projeto ou senioridade entre usuários envolvidos e passivos podem influenciar a comparação tanto quanto Copilot a própria adoção.

Agindo sobre suas percepções

Use tendências de uso, adoção de recursos e atividade de linguagem para orientar o planejamento de habilitação e distribuição.

ObservaçãoCausa possívelAção sugerida
Alta adoção em algumas equipes, mas baixa em outrasAlgumas equipes podem não ter Bate-papo do Copilot habilitado ou configurado corretamente.Verificar a atribuição de licença e a configuração do IDE; oferecer integração em nível de equipe.
Uso constante, mas adoção baixa por agentesOs desenvolvedores podem não estar cientes dos agente do Copilot recursos.Compartilhe demonstrações internas ou histórias de sucesso.
Queda na DAU ou taxa de aceitaçãoProblemas de configuração ou redução da relevância das sugestões.Incentive comentários e verifique o IDE e as versões de extensão.

Dica

Considere combinar as tendências do painel com o feedback de pesquisas ou retrospectivas para obter uma visão completa do impacto de Copilot na produtividade dos desenvolvedores.

Próximas etapas