Métricas

Uncle Bob descreve como usa métricas e testes para acompanhar o código produzido por agentes.Veja o post de Robert C.

Métricas como pass@k são úteis.

O que observávamos eram métricas agregadas como precisão, recall, F1, taxa de falsos positivos ou taxa de falsos negativos.

O agente não só tem acesso a métricas do Datadog, mas também opta por gerar seu próprio dashboard para acompanhar o lançamento daquela funcionalidade.

Avalie o impacto da IA na produtividade do time e meça resultados relevantes evitando métricas de vaidade.

Os profissionais devem realizar pilotos em pequena escala para estabelecer métricas de desempenho de base para seus repositórios específicos antes da implantação generalizada.

…ar Crie planos de teste Atribua campeões de teste Organização e rastreamento Obtenha a adesão da empresa Tenha métricas de rastreamento Experiência do desenvolvedor Facilite a escrita de testes Faça seu CI rápido Construa uma comunidade Apresentações

Mais especificamente, (i) comparamos as distribuições de métricas de código, que são usadas como recursos pelos modelos, entre sistemas de código aberto e ING, (ii) medimos a precisão de diferentes modelos de aprendizado de máquina na recomendação de refatorações do Método de Extração, (iii) comparamos as recomendações dadas pelos modelos com as opiniões de …

Medimos sistematicamente a eficácia de cinco modelos com base em métricas de código, exploramos o efeito das técnicas de amostragem, entendemos quais recursos os modelos consideram relevantes para a previsão e avaliamos se podemos explorar 388.086 métodos de 29 projetos Apache para aprender onde fazer login em um ambiente industrial.

Nosso algoritmo pode encontrar soluções que melhorem a base de código de acordo com as métricas que otimizamos, e os desenvolvedores veem valor nas recomendações.

Nossos resultados mostram que (i) Random Forests são os melhores modelos para prever a refatoração de software, (ii) as métricas de processo e propriedade parecem desempenhar um papel crucial na criação de melhores modelos e (iii) os modelos generalizam bem em diferentes contextos.

A eficácia da abordagem proposta é demonstrada através da avaliação empírica dos classificadores supervisionados sob diversas métricas de desempenho.

…am juntos, e (3) como as técnicas existentes de avaliação de qualidade para design orientado a objetos devem ir além das métricas de alto nível.

Esta percepção é apoiada por métricas adicionais.

Na verdade, como mostramos em um estudo anterior, as funções arquitetônicas são diferentes entre si em termos de métricas de código.

Neste artigo, propomos SATT (Software Architecture Tailored Thresholds), uma abordagem que detecta se uma função arquitetural é consideravelmente diferente de outras no sistema em termos de métricas de código, e fornece um limite específico para essa função.

Neste artigo apresentamos o MetricMiner, uma aplicação web que visa apoiar pesquisadores em algumas etapas da mineração de repositórios de software, como cálculo de métricas, extração de dados e inferência estatística.