Wprowadzające w błąd w sposób karny świetny nagłówek - byłem zaintrygowany, kiedy po raz pierwszy to przeczytałem. Ale po minutzie lub dwóch natrafiłem na post jednego z uczestników, który opowiada o swoim doświadczeniu, nieumyślnie wrzucając szalenie ważne informacje... To był ich pierwszy raz, kiedy używali sztucznej inteligencji do kodowania. Kiedykolwiek. Stwierdzenie, że metodologia jest wątpliwa, byłoby niedopowiedzeniem. Już i tak mała liczebność próby (tylko 16 deweloperów), jak tf pomijają tę część: "aha, a tak przy okazji, to był pierwszy raz, kiedy uczestnicy używali sztucznej inteligencji do kodowania dosłownie w historii, a my specjalnie zachęciliśmy ich do spędzenia jak największej ilości czasu przy użyciu sztucznej inteligencji, jak to tylko możliwe" ???? Lmao powiedział:
METR
METR11 lip 2025
Przeprowadziliśmy randomizowane, kontrolowane badanie, aby sprawdzić, jak bardzo narzędzia do kodowania AI przyspieszają doświadczonych programistów open source. Wyniki nas zaskoczyły: programiści myśleli, że są o 20% szybsi dzięki narzędziom AI, ale w rzeczywistości byli o 19% wolniejsi, gdy mieli dostęp do AI, niż gdy go nie mieli.
266