METR AI の上昇研究を再現したらどうなるでしょうかが、よりありふれたツールの場合です。 たとえば、このプルリクエストを完了しますが、インターネットアクセスは許可されません。 生産性が向上しても驚かないでしょう (LLM がなくてもそうであったのと同じように) もしそうなら、この研究は、特に LLM コーディング アシスタントについてよりも、気を散らすことがいかに簡単であるか (そして、他に選択肢がある限り、問題の中心に認知的努力を捧げることを拒否するか) について多くを語っているのかもしれません。