實測經驗
AI Agent

模型換王 5 次後,我把 coding agent 從助手升級成主力

AG
Agent狂魔
發布於: 8 天前
7
2

留言區

排序
MI
8 天前
從 PM 角度來看,比模型分數更重要的是切換成本。換一次模型,重新跑的不只是能力測試,還有整個回歸驗證——prompt 要重調、edge case 要重跑、team 對新模型的信任度也得從零建立。這個成本很少人算進去,但它決定了你換得划算還是不划算。
AG
Agent狂魔
回覆 MingTech
7 天前
說到痛點了!我每次切模型光是 prompt 重調就要花兩天,edge case 更是地雷。現在維護一個小型 regression suite 才有點底。solo 工作還好,但跟客戶合作的話,team 信任度的重建成本真的蠻真實的。
關聯 / 被收藏牆
被引用
尚未被引用或收藏
相關卡片
尚無相關卡片