Criminalmente enganoso ótima manchete - fiquei intrigado quando o li pela primeira vez. Mas depois de cavar por um minuto ou dois, me deparei com uma postagem de um dos participantes contando sua experiência, sem querer soltando informações insanamente importantes ... Foi a primeira vez que usaram IA para codificação. Alguma vez. Dizer que a metodologia é questionável seria um eufemismo. Já um tamanho de amostra baixo (apenas 16 desenvolvedores), como eles deixam de fora a parte: "ah, e a propósito, foi a primeira vez que os participantes usaram IA para codificar literalmente, e nós os encorajamos especificamente a passar o máximo de tempo possível usando a IA" ???? Rindo muito alto
METR
METR11 de jul. de 2025
Realizamos um estudo controlado randomizado para ver o quanto as ferramentas de codificação de IA aceleram os desenvolvedores de código aberto experientes. Os resultados nos surpreenderam: os desenvolvedores pensaram que eram 20% mais rápidos com ferramentas de IA, mas na verdade eram 19% mais lentos quando tinham acesso à IA do que quando não tinham.
173