Lauren Tan Agent 工作流完整拆解:pstack 驗證優先策略與 Token 成本觀察

深入分析 Lauren Tan 的 pstack 系統:從信任曲線、真實產品驗證、技能編碼到獨立審核機制,附社群實測成本與風險討論,幫助工程團隊評估 AI Agent 導入可行性。

核心結論先行

Lauren Tan(@poteto)在 X 上自述平均每月消耗 約 150 億 tokens,並產出數千個 PR。但這組數字不具備普遍可比性:她處於實驗室近乎無限量的使用條件,且 token 消耗結構中包含大量上下文重讀與驗證成本。真正可供參考的,是她將工程師判斷轉化為 可執行、可驗證、可迭代 的系統——pstack。


一、Token 數字的正確解讀

指標 說明 來源備註
月均 token 用量 ~15B(150 億) X 自述,已更正「非每日」
月均 PR 數 1,000–2,500 區間 不同月份/統計口徑,非固定產能
單次執行樣本 輸入 2.85M / 輸出 43K tokens 單一案例,無法推論月均組成

關鍵提醒:

  • 此用量非一般個人訂閱可達標,亦非效能基準。
  • 衡量投入產出應綜合:模型費用、驗證成本、返工率、人工審查時間。

二、pstack 系統的五大設計原則

1. 先建立信任曲線,再擴大並行

「不要一開始就大量開 Agent,尚未建立驗證能力時,擴大並行只會更快消耗 tokens。」

實作步驟:

  1. 觀察少數 Agent 執行任務
  2. 親自找出重複失誤模式
  3. 將失誤整理為 skills(技能) 與 檢查流程
  4. 確認 Agent 能自行驗證工作後,才擴展至雲端與多 Agent

2. 讓 Agent 驗證真實產品,而不只跑測試

  • Verification ≠ 單元測試
  • 要求 Agent 在接近使用者情境下:操作應用、重現問題、檢查畫面/效能資料
  • 使用 Feature Map:記錄功能位置、操作方式、快捷鍵、DOM 選擇器,讓 Agent 知道如何抵達測試目標

3. 把常見失誤編成 Skills 與 Playbooks

pstack 的 /poteto-mode 依任務選擇流程並調用特定技能:

指令 用途
/how 追查系統實際如何運作
/why 從程式碼歷史、PR、文件尋找設計背景
/recall 用過往對話補回先前脈絡
重述問題 遇模糊問題時,先讓 Agent 用自己話重述,再動代碼

4. 不同 Agent 承擔不同責任

社群流傳配置(非固定編制,視工作流而定):

  • Chief of Staff / PM-Agent:協調、拆解任務
  • Worker Agents(10–25 個):並行實作
  • 關鍵機制:/loop(持續執行)、/goal(目標導向)、/swarm(拆分並行)

5. 審核獨立於實作

  • 寫代碼的 Agent 不自我宣告完成
  • 安排獨立驗證 Agent 檢查同一變更,要求 CI 通過
  • 驗證代理數量可依成本縮減
  • 將「人工逐筆檢查」轉化為「測試 + CI + 驗證技能 + 獨立審核」的成本結構

三、社群實測與討論焦點

面向 正面觀察 風險與質疑
實作價值 Reddit 用戶搭配 Cursor Projects:協調 Agent 拆任務 → 派發雲端 Agent → 要求截圖/影片驗證 → 整理 PR,回報品質與效率改善 個人經驗分享,非受控測試
Token 成本 — 多 Agent 互相委派、重讀上下文、重試,成本藏在不顯眼處;實驗室無限量條件難複現
過度自動化 — 高 PR 產量 ≠ 高價值;瓶頸會推向 review、整合、上線判斷
上手相容性 可與既有規格/規劃流程並用 需配合專案脈絡與預算調整;非裝外掛即得同等成效

四、給一般團隊的落地建議

:white_check_mark: 建議起步路徑

  1. 選一種高頻、可重現驗證的任務(如:特定 Bug 修復、元件重構、測試補齊)
  2. 建立單一驗證流程:真實環境操作 + 自動化檢查點
  3. 記錄每次任務的四項指標:
    • Token 成本
    • 返工率
    • PR 品質(審查通過率、上線後事故率)
    • 人工介入時間
  4. 累積 Skills:將重複失誤編碼為可重用技能
  5. 證據顯示效益成立後,再擴大 Agent 並行與自動合併範圍

:cross_mark: 避免的誤區

  • 直接照搬 15–25 Agent 編制
  • 以 PR 數量為 KPI
  • 忽略驗證基建,急於追求自動合併
  • 未設定模型使用上限與成本告警

五、快速參考:pstack 關鍵指令表

/poteto-mode   # 依任務選擇流程、調用技能
/how           # 追查系統實際運作
/why           # 尋找設計背景(歷史、PR、文件)
/recall        # 補回過往對話脈絡
/loop          # 持續執行直到達標
/goal          # 目標導向執行
/swarm         # 任務拆分並行

結語

Lauren Tan 的案例展示了 「驗證優先、技能沉澱、審核獨立」 的 AI 工程化路徑。對大多數團隊,核心啟發不在於追趕 150 億 tokens,而在於:先把一件事的驗證做對、做自動、可追蹤,再考慮規模化。從單一任務、單一驗證流程開始,用數據說話,才是降低風險的務實路徑。