Eu me pergunto o que aconteceria se você replicasse o estudo de elevação da IA do METR, mas para ferramentas mais mundanas. Por exemplo, conclua esta solicitação de pull, mas nenhum acesso à Internet é permitido. Não ficaria surpreso se a produtividade melhorasse (assim como aconteceu sem LLMs) Nesse caso, talvez o estudo diga mais sobre como é fácil se distrair (e como, desde que você tenha qualquer outra opção, você se recusará a dedicar esforço cognitivo no centro do problema) do que sobre os assistentes de codificação LLM especificamente.