亞馬遜(Amazon,AMZN)建議不要把軟體工程師使用AI的多寡列為工作績效目標,因為增加Token用量或修改更多程式碼,不一定能為顧客與業務帶來實際成果。
亞馬遜於27日公布的工程師職務指引,將對顧客、業務及團隊的影響列為評估標準,重點是工作成果,而非使用了哪些工具或產生多少程式碼。
亞馬遜全球商店副總裁暨傑出工程師Terk Terkowitz表示:「如果目前的AI工具沒有幫上工作,這不是失敗,而是一項發現。」他指出,判斷AI是否適用於特定工作,本身也是一項有用的結果。
亞馬遜建議工程師記錄AI未能發揮作用的原因,與同事分享並告知主管,也鼓勵團隊一同尋找可能的解決方法。
這份指引提醒工程師留意「Tokenmaxxing」,也就是專注增加AI模型處理的Token用量。Terkowitz指出,Token用量和程式碼行數都是「存在重大缺陷」的生產力指標,單看這些數字無法判斷成果品質。
若把這些指標當成目標,可能增加成本與不必要的複雜度。亞馬遜表示,增加Token用量不符合成本節約原則,而增加程式碼行數則違背簡化原則。
其他企業也開始同步管理AI使用量與成本。本刊先前曾報導,部分企業正追蹤AI工具的使用量與支出,並限制員工使用高價模型。
亞馬遜並未取消使用量指標。Terkowitz表示,在積極導入AI的團隊中,AI使用量與重要工作成果之間曾呈現相關性。
不過,指引提醒管理者應審慎解讀這類數據。使用量高不代表績效一定較好,即使將指標作為參考,也應運用判斷力。
亞馬遜建議管理者同時檢視團隊中AI使用量最低的10%與最高的10%。使用量較低的團隊可釐清導入進度較慢的原因;使用量較高的團隊則應確認實際工作成果是否也有所增加。
長期績效需要時間才會顯現,也難以與其他因素分開衡量。亞馬遜表示,因此過去曾參考Token用量,以及程式碼變更和審查件數等指標。
指引指出,AI的使用方式變化快速,難以只依據目前採用的工具來界定開發者的角色,因此評估重點應放在成果,而非開發者使用了哪些工具。
亞馬遜提出「文藝復興型開發者」的概念,強調將AI工具與人的判斷及領域專業知識結合。工程師應熟悉AI並將其應用於日常工作,也要能說明AI在哪些工作中有幫助、在哪些工作中沒有幫助。
亞馬遜也要求管理者親自使用AI,並向團隊說明哪些工作因此受益、哪些沒有。公司表示,深入了解產品與顧客的工程師,能更有效運用AI與AI代理。
亞馬遜表示,將持續依據AI對工作的影響調整工程師職務指引。
留言 0