跳到主要內容
判斷力實驗室 · Judgment Lab
指標設計實務 101

結業考試

10 題,每題 5 分,滿分 50 分。 可先執行查看結果再交卷。

已作答 0 / 10
L1 虛榮 vs 可行動

1. 你在新公司接手一張儀表板,發現上面放著這 6 個指標:(A) FB 粉絲總數 (B) 本月新客 7 日加購率 (C) 官網總訪客數 (D) 新客 30 日回購率 (E) EDM 月開信率 (F) 加購到結帳完成率。請用 Actionable / Attributable / Comparable 三條判準,分別判斷每一個是『虛榮』還是『可行動』,並說明哪條判準是關鍵。

L1 指標改造

2. 承上題,把你判定為『虛榮』的那幾個指標,改成『可行動』的版本。每個改造要寫:(A) 原版為什麼推不動決策;(B) 新版怎麼綁到一個下一步動作;(C) 你會把新版放在儀表板的哪一層(公司層 / 部門層 / 執行層)。

L2 NSM 排除法

3. 情境:B2B SaaS 訂閱工具,付費客戶 300 家,ARR 2000 萬,主要成長動力是既有客戶續約和擴張銷售。以下 4 個候選指標,請排除 3 個不適合當北極星指標的,並為每個被排除的指標指出它違反了三條件(單一 / 長期 / 用戶價值)的哪一條。候選:(A) 月營收、(B) 週活躍工作區數(有傳 20 則訊息以上)、(C) 網站月訪客數、(D) NRR(Net Revenue Retention)。最後對你選中的那個,設計一個 counter metric。

L2 NSM 動態性

4. 假設你服務一家內容訂閱平台,目前正從『衝新訂戶、搶市佔』階段,轉向『壓 CAC、衝留存』階段。請回答:(A) 舊階段合理的 NSM 是什麼?為什麼?(B) 新階段合理的 NSM 是什麼?為什麼?(C) 如果沿用舊 NSM 進入新階段,團隊最可能被誤導做出什麼錯誤動作?

L3 部門拆解

5. 情境:DTC 保養品電商,NSM = 90 日活躍購買者。請從『電商營運 + 產品』部門的角度,拆出 2 個 driver(要能直接推動 NSM、有明確槓桿),並每個 driver 往下拆 2-3 個可操作的 input。每個 driver 要寫:(A) 定義(怎麼算);(B) owner 具體到哪個角色;(C) 為什麼是這個部門管、不是行銷或客服。

L3 跨部門衝突

6. 承上題或另舉一例,找出一組『行銷部 vs 其他部門』的 driver 衝突情境。寫清楚:(A) 雙方各自的 driver 和原本盯的槓桿;(B) 這組 driver 如何造成衝突(行銷做了什麼,另一個部門什麼被拖垮);(C) 設計一個 counter metric 讓兩邊都要一起盯,具體寫出指標名稱、計算公式、及它怎麼守住不被犧牲的那一邊。

L4 陷阱辨識

7. 以下三個『看起來變好』的指標結果,請分別判斷最可能是哪種陷阱(Goodhart / Simpson / Survivorship / 指標孤立)、要看哪個配對指標或 cohort 切片才能驗證真相。案例 1:客服工單解決數 KPI 達成 130%,但 7 日重開率從 8% 升到 14%。案例 2:FB 整體廣告 CVR 從 2.5% 升到 3.1%,但 LTV:CAC 從 3.2 掉到 2.1。案例 3:某 SaaS 公司用『既有活躍客戶平均消費』算 LTV,算出 LTV = 12,000 元,因此決定把 CAC 上限放寬到 4,000 元——但實際跑 6 個月後發現很多新客不到 3,000 元就流失。

L4 Goodhart 案例應用

8. 選一個 Goodhart's Law 經典案例(Meta 2026 的 AI token KPI / Wells Fargo 的 products per household / Uber 司機評分,任選其一),分析:(A) 這個 KPI 原本想衡量什麼商業價值?(B) 它實際上被優化成了什麼(人們具體做了什麼動作)?(C) 如果你當時是負責設計 KPI 的主管,你會怎麼重新設計?不一定是廢掉這個 KPI,可以是加 counter metric、改用多指標組合、改評估週期、或綁定合規稽核——請具體寫出你的新設計。

L5 指標規格化

9. 選一個你前面某題用過的 driver 或 input 指標,對它跑完整的『指標規格化 5 問』:(1) 分母是誰?(2) 更新頻率?(3) 比較基準(WoW / MoM / YoY)?(4) 要 cohort 切分嗎?怎麼切?(5) Owner 具體到哪個角色?每一問都要具體回答,不能寫『視情況而定』。

L5 完整儀表板設計

10. 綜合案例:Morning Light 是訂閱制早餐包(每週配送健康早餐),MRR 月 120 萬、客戶 600 家(月訂閱 1,999 元)、主要靠 IG + KOL 合作獲客、月流失率 8%(高於健康值)、半年目標 MRR 200 萬 + 月流失率壓到 5%。請完整做一遍 7 步設計流程:(1) 業務戰場判斷(GMV / LTV:CAC / MRR);(2) 選 NSM 並說明理由;(3) 拆 3 個 driver、每個配 owner + counter metric;(4) 其中 1 個 driver 拆 2-3 個 input;(5) 對你選的那個 driver 跑指標規格化 5 問;(6) 用文字描述儀表板三層架構(哪一層放什麼);(7) 列出這張儀表板最容易被誤讀的 2 個風險 + 防呆設計。

確認作答完畢後,點擊交卷