TL;DR
Jedne badania mówią, że AI przyspiesza programistów o połowę, inne, że ich spowalnia. Autor zestawił je ze sobą i pokazuje, że wcale się nie kłócą, bo mierzą różne rzeczy. METR sprawdził 16 doświadczonych programistów na 246 zadaniach we własnych repozytoriach i wyszło, że z AI pracowali średnio o 19% dłużej, choć sami czuli się szybsi o jakieś 20%. W eksperymencie Farleya, gdzie trzeba było dodać funkcję do obcego kodu, wynik był odwrotny: około 30% szybciej, a u osób używających AI regularnie nawet 56%.
Prawdziwa ciekawostka kryje się w danych z całych organizacji. Faros AI, na próbie 10 tysięcy programistów, widzi 98% więcej scalonych pull requestów, ale też PR-y większe o 154% i czas review dłuższy o 91%. GitClear dorzuca ośmiokrotny wzrost duplikacji kodu w 2024 roku. Wąskie gardło przeniosło się z pisania na weryfikację, a wynik całej firmy wcale się nie poprawia. Zobacz, które liczby da się uczciwie porównać i jaką miarą nie warto oceniać pracy z AI.
Jedni mówią, że AI przyspiesza pracę o połowę, inni, że spowalnia. Sprawdziłem badania i 4 filmy – i okazało się, że często mierzą zupełnie co innego…
Czytaj cały wpis u źródła
