Amazon zmienia opis pracy programisty. Liczy się efekt, a nie to, ile używasz AI

Amazon opublikował 27 października list, w którym kierownictwo techniczne firmy opisuje nowe wytyczne dla programistów. Główna teza: programistę ocenia się po efektach pracy, a nie po tym, jakich narzędzi używa, także AI. Tekst dotyczy wprost inżynierów Amazona, ale przyda się każdemu, czyj szef liczy, ile zespół korzysta z czatów i agentów AI. List podpisał Terk Terkowitz, wiceprezes i Distinguished Engineer w dziale sklepów Amazona, a całość jest w newsroomie firmy.

Dlaczego Amazon nie wpisał AI do opisu stanowiska

Najwyżej postawieni inżynierowie Amazona spierali się o AI w opisie stanowiska. Przez dwie dekady firma unikała w nim konkretnych technologii, także gdy programiści przechodzili do chmury. Tym razem autorzy przyznają, że AI zmienia pracę programisty szybciej i głębiej niż wcześniejsze trendy. Mimo to postawili na to, co się nie zmienia: wpływ na klientów, na firmę i na zespół.

Powód jest praktyczny. Według autorów każda definicja dobrej pracy z AI, spisana dziś, za rok będzie przestarzała, a przestarzała definicja może hamować zespoły.

Liczenie tokenów ma wady i Amazon to przyznaje

Najciekawsza część listu dotyczy mierzenia. Efekty pracy trudno zmierzyć szybko, więc Amazon używał też wskaźników zastępczych. Jednym z nich jest zużycie tokenów, czyli jednostek, w których firmy AI liczą ilość tekstu przetworzonego przez model. Inne to odsetek ludzi korzystających z narzędzi AI oraz liczba zmian w kodzie i przeglądów.

Autorzy piszą, że te wskaźniki mają poważne wady, bo nie mierzą tego, co naprawdę ważne. Użyte jako cel zamiast miary mogą podnieść koszty i skomplikować kod. Jednocześnie Amazon zauważa, że te same wskaźniki na razie dobrze pokrywają się z wynikami. Zespoły, które nie korzystają z AI, według listu zostają w tyle.

Z tego wynika konkretna rada dla kierowników. Amazon proponuje patrzeć na dwa krańce: dolne 10 proc. zespołów pod względem użycia AI i górne 10 proc. W pierwszej grupie trzeba zrozumieć, dlaczego AI się nie przyjęło. W drugiej trzeba sprawdzić, czy duże użycie AI daje proporcjonalnie więcej gotowej pracy.

„To jest wniosek, a nie porażka”

Jedno zdanie z listu warto pokazać przełożonemu. W wiernym tłumaczeniu brzmi tak: „Jeśli twoja praca nie zyskuje na obecnych narzędziach AI, to jest wniosek, a nie porażka”. Amazon prosi, żeby taki przypadek opisać, pokazać innym i przynieść kierownikowi.

Wymagania wobec szefów są równie konkretne. Kierownik ma sam używać narzędzi AI w prawdziwej pracy. Ma też umieć wskazać zadanie, w którym pomogły, i takie, w którym nie pomogły.

Co z tego wziąć do własnej firmy

Jeśli w twojej firmie ktoś ocenia wdrożenie AI po liczbie licencji albo zużyciu, list Amazona daje dwa argumenty. Pierwszy: sam Amazon traktuje takie liczby ostrożnie i każe kierownikom łączyć je z efektami pracy. Drugi: miejsce, w którym AI nie pomaga, warto spisać, zamiast je ukrywać.

O tym, jak szybko agenci AI wchodzą do pracy programistów, pisaliśmy przy danych GitHuba o pull requestach z udziałem agentów i przy historii firmy Block, w której drogi model planuje, a tańsze piszą kod. Amazon pisze w liście tylko, że zatrudnia tysiące programistów. Nie podaje, od kiedy nowe wytyczne obowiązują.