📊 Benchmark 儀表板

即時測量各模式的回應速度、Token 用量與 API 成本

← 回問答頁 概念星圖 模擬考 掃描考卷

試試看 — 即時 Benchmark

📝 Normal 問答

extractKeywords → judge → generate → verify
點擊測試

🎓 Socratic 導師

extractKeywords → judge → socraticGuide
點擊測試

🔍 Misconception 診斷

extractKeywords → judge → detectMisconception
點擊測試

📋 Exam 考試

純本地檔案篩選 + 字串比對
零 API 成本 ✓
PhaseModelTimeInputOutputCost

📋 Exam 模式 — 零 API 成本

考試生成和評分完全在本地完成，不呼叫 LLM API：
• 題目生成：從 210 道題庫中按章節/難度篩選
• 評分：答案字串比對
• 解析：直接從筆記 frontmatter 讀取
→ 即使 1,000 位學生每天考 3 次，API 成本仍為 $0

成本估算表

方案 100 學生
×5 問/天		 500 學生
×10 問/天		 1,000 學生
×20 問/天
本系統（Normal） — — —
ChatGPT Plus（$20/月/人） $2,000/月 $10,000/月 $20,000/月
Google AI Studio（免費額度） $0 超出免費 超出免費

* 本系統成本依實際 benchmark 數據計算，假設平均每問成本等於 Normal 模式單次成本。

* Socratic 首輪成本略低於 Normal（少 verify），後續輪只有一次 evaluateResponse 呼叫，成本極低。

八角框架 × 功能 × 成本

功能驅動力帽色單次成本說明
Normal 問答 CD3 創意授權 白帽 — 自由探索式問答
Socratic 導師 CD3 創意授權 白帽 — 引導式問答，學生主導方向
概念診斷 CD2 成就感 白帽 — 找出概念錯誤，有針對性地修正
概念星圖 CD2 + CD7 白+黑 $0 前端靜態視覺化，零 API 成本
每日挑戰 CD6 + CD7 黑帽 $0 本地題庫篩選，零 API 成本
模擬考 CD2 成就感 白帽 $0 本地生成+評分，零 API 成本
▼ 新功能（開發中）
📌 畫重點 + 註釋 CD3 + CD4 白帽 $0 純前端操作，標記與註釋存在本地
📝 學習筆記整合 CD2 + CD3 + CD5 白帽 ~$0.08–0.15 需強模型深度推理：比對知識庫 → 整合 → 品質判斷
📷 掃描考卷分析 CD2 + CD7 白+黑 ~$0.03–0.05 OCR + 題目概念分類 + 弱點比對

新功能成本分析

📌 畫重點 + 註釋 無 API

模型需求 無（純前端）
單次成本 $0
推理複雜度
標記和註釋的建立、儲存、顯示都在前端完成，不呼叫 LLM。

📷 掃描考卷 Sonnet 4.5

模型需求 Sonnet 4.5（multimodal）
預估 Token ~8K input + ~2K output
單次成本 ~$0.03–0.05
推理複雜度
OCR 辨識 + 題目分類是結構化任務，Sonnet 即可勝任。弱點分析可用本地題庫交叉比對降低成本。

📝 學習筆記整合 Opus 4.5+

模型需求 Opus 4.5 或同級（深度推理）
預估 Token ~30K–50K input + ~3K output
單次成本 ~$0.08–0.15
推理複雜度
100 學生 × 2 次/天 ~$600–900/月
500 學生 × 2 次/天 ~$3,000–4,500/月
對比 Normal 問答 ~4–7× 倍

⚠️ 為什麼筆記整合成本遠高於一般問答？

  • 大量 Context 載入：需讀入整段對話歷程（多輪問答）+ 所有畫重點位置 + 所有註釋內容 + 知識庫中相關筆記，Token 量是一般問答的 3–5 倍
  • 知識比對與修剪判斷：AI 要比對「學生整理的內容」vs「知識庫已有內容」，判斷哪些是新知識、哪些已存在需合併、哪些品質不足應建議刪除——甚至建議「這個概念你已經有了，不需要重複加入」。這是深層推理任務，弱模型（Haiku）無法可靠執行
  • 三源整合：要區分並標記內容來源（教材原文 / 學生筆記 / AI 分析），產出結構化 Markdown，同時維持教學品質——需要強模型的指令遵循能力
  • 品質守門：學生可能標記了錯誤理解或加了有誤的註釋，AI 需要發現並標出「⚠️ 需加強」而非照抄——這需要深度的物理概念理解
💡 優化策略：可考慮分層處理——用 Haiku 做初步結構化（提取重點/註釋），用 Opus 只做最終的知識比對與品質判斷，降低整體成本至 ~$0.05–0.08/次。
功能組合 100 學生/月 500 學生/月 1,000 學生/月
現有功能（問答+導師+考試） — — —
+ 掃描考卷（2 次/週） +$24–40 +$120–200 +$240–400
+ 學習筆記整合（2 次/天） +$480–900 +$2,400–4,500 +$4,800–9,000
全功能套餐 ~$550–1,000 ~$2,700–5,000 ~$5,400–10,000
ChatGPT Plus（$20/月/人） $2,000/月 $10,000/月 $20,000/月

* 筆記整合使用頻率假設每人每天 2 次（上課後整理 + 複習後整理）。實際使用頻率可能更低。

* 「現有功能」成本在上方 benchmark 測試後自動填入。