報告 ID: 20260412_020743
產生時間: 2026-04-12T02:07:43.653693
測試類型: api
| 模型 | Agent gemma3:27b · 部署 本地 (ollama) · Evaluator gpt-4.1-mini · 部署 雲端 (OpenAI API) |
| RAG | 知識庫 ChromaDB (FAQ / Web / Cases / Manuals) · Embedding BAAI/bge-m3 · Hybrid Search ON (fusion=rrf, semantic_k=20, bm25_k=20) · Reranker OFF |
| 測試 | 資料 airiti/華藝FAQ.csv · 題數 20 · Timeout 180s · 主機 ai3-glis · Commit 6e7c036 |
| 分類 | 總數 | 成功 | 失敗 | 成功率 | 平均分數 |
|---|---|---|---|---|---|
| 公司介紹 | 3 | 3 | 0 | 100.0% | 0.87 |
| Airiti Library | 17 | 14 | 3 | 82.4% | 0.78 |
| 工具 | 使用次數 |
|---|---|
| search_airiti_web | 13 |
| search_airiti_faq | 7 |
| ask_user | 2 |