🧪 自動化測試報告

報告 ID: 20260412_025222

產生時間: 2026-04-12T02:52:22.626469

測試類型: unit

🖥️ 測試環境

模型Agent gemma3:27b  ·  部署 本地 (ollama)  ·  Evaluator gpt-4.1-mini  ·  部署 雲端 (OpenAI API)
RAG知識庫 ChromaDB (FAQ / Web / Cases / Manuals)  ·  Embedding BAAI/bge-m3  ·  Hybrid Search ON (fusion=rrf, semantic_k=20, bm25_k=20)  ·  Reranker OFF
測試資料 airiti/華藝FAQ.csv  ·  題數 100  ·  Timeout 180s  ·  主機 ai3-glis  ·  Commit 6e7c036

📊 總體統計

100
有效測試數
93
成功
7
失敗
0
跳過（超時）
93.0%
成功率
0.93
平均分數
11.9s
平均回應時間

📁 分類統計

分類 總數 成功 失敗 成功率 平均分數
公司介紹 3 3 0 100.0% 0.89
Airiti Library 17 16 1 94.1% 0.96
DOI 10 10 0 100.0% 0.98
是科探索 5 5 0 100.0% 0.96
電子書 4 4 0 100.0% 1.00
ACI 3 3 0 100.0% 1.00
期刊授權 3 3 0 100.0% 0.97
訂閱服務 3 3 0 100.0% 1.00
iCheers 6 3 3 50.0% 0.50
技術支援 4 4 0 100.0% 1.00
學術傳播 3 3 0 100.0% 0.92
學術統計 3 3 0 100.0% 0.93
TSSCI/THCI 3 3 0 100.0% 1.00
碩博士論文 3 3 0 100.0% 1.00
會議論文 2 2 0 100.0% 1.00
資料安全 2 2 0 100.0% 1.00
合作夥伴 2 2 0 100.0% 0.95
ESG 1 1 0 100.0% 0.70
開放取用 2 2 0 100.0% 1.00
人才招募 2 1 1 50.0% 0.68
文獻引用 2 2 0 100.0% 1.00
批量服務 2 2 0 100.0% 1.00
API服務 1 1 0 100.0% 1.00
問題回報 2 1 1 50.0% 0.50
新功能 2 1 1 50.0% 0.78
DOI進階 2 2 0 100.0% 0.98
使用統計 2 2 0 100.0% 1.00
多媒體 1 1 0 100.0% 1.00
列印服務 1 1 0 100.0% 1.00
離線閱讀 1 1 0 100.0% 1.00
帳號管理 2 2 0 100.0% 1.00
語言支援 1 1 0 100.0% 1.00

🔧 工具使用統計

工具 使用次數
search_airiti_faq 83
search_airiti_web 14

⚠️ 回答錯誤常見原因（AI 評估回答失敗案例分析）

缺少全球用戶數及國家/地區範圍資訊缺少收錄期刊及論文集數量缺少碩博士論文收錄資訊系統回答偏離問題核心，包含多項無關產品介紹系統回答缺少預期答案中關於葡萄酒、啤酒及分類的關鍵資訊系統回答缺少預期答案的關鍵資訊系統回答未提供麗絲玲葡萄品種的定義、特性及相關資訊未列出具體部門名稱，如產品開發、資訊技術、業務行銷、客戶服務、內容營運、行政管理Error code: 400 - {'error': {'message': "We could not parse the JSON body of your request. (HINT: This likely means you aren't using your HTTP library correctly. The OpenAI API expects a JSON payload, but what was sent was not valid JSON. If you have trouble figuring out how to fix this, please contact us through our help center at help.openai.com.)", 'type': 'invalid_request_error', 'param': None, 'code': None}}缺少 AI 輔助搜尋功能

📋 測試案例詳情

✅ faq_faq_0001 華藝數位是什麼公司？ 分數: 1.00 17.8s ▶
✅ faq_faq_0002 華藝數位提供哪些產品和服務？ 分數: 0.80 12.5s ▶
✅ faq_faq_0003 如何聯絡華藝數位客服？ 分數: 0.87 12.5s ▶
❌ faq_faq_0004 什麼是 Airiti Library 華藝線上圖書館？ 分數: 0.30 12.7s ▶
✅ faq_faq_0005 Airiti Library 收錄哪些類型的文獻？ 分數: 1.00 10.3s ▶
✅ faq_faq_0006 如何使用 Airiti Library 搜尋文獻？ 分數: 1.00 13.9s ▶
✅ faq_faq_0007 Airiti Library 支援哪些檢索模式？ 分數: 1.00 9.9s ▶
✅ faq_faq_0008 如何下載 Airiti Library 的全文 PDF？ 分數: 1.00 11.5s ▶
✅ faq_faq_0009 為什麼我無法下載 Airiti Library 的全文？ 分數: 1.00 14.6s ▶
✅ faq_faq_0010 如何在校外使用 Airiti Library？ 分數: 1.00 14.0s ▶
✅ faq_faq_0011 Airiti Library 支援哪些引用格式匯出？ 分數: 1.00 10.9s ▶
✅ faq_faq_0012 什麼是 Airiti Library 的引文互連功能？ 分數: 1.00 10.3s ▶
✅ faq_faq_0013 什麼是 PlumX 替代計量分析？ 分數: 1.00 10.8s ▶
✅ faq_faq_0014 Airiti Library 有哪些個人化服務？ 分數: 1.00 10.4s ▶
✅ faq_faq_0015 如何成為 Airiti Library 會員？ 分數: 1.00 15.6s ▶
✅ faq_faq_0016 Airiti Library 支援哪些語言介面？ 分數: 1.00 9.2s ▶
✅ faq_faq_0017 Airiti Library 可以在手機上使用嗎？ 分數: 1.00 9.1s ▶
✅ faq_faq_0018 什麼是高被引文獻分析功能？ 分數: 1.00 10.0s ▶
✅ faq_faq_0019 如何查看期刊的影響力指標？ 分數: 1.00 10.0s ▶
✅ faq_faq_0020 Airiti Library 與哪些學術平台合作？ 分數: 1.00 9.2s ▶
✅ faq_faq_0021 什麼是 DOI？ 分數: 1.00 12.6s ▶
✅ faq_faq_0022 華藝 DOI 註冊中心提供哪些服務？ 分數: 1.00 11.0s ▶
✅ faq_faq_0023 誰可以申請 DOI 註冊？ 分數: 0.85 9.1s ▶
✅ faq_faq_0024 DOI 註冊需要費用嗎？ 分數: 1.00 11.4s ▶
✅ faq_faq_0025 如何使用 DOI 解析工具？ 分數: 1.00 10.4s ▶
✅ faq_faq_0026 什麼是 Airiti Cited by Service？ 分數: 1.00 10.4s ▶
✅ faq_faq_0027 如何查詢 DOI 物件資料？ 分數: 1.00 10.2s ▶
✅ faq_faq_0028 選擇官方註冊中心與第三方中介機構的差異？ 分數: 1.00 11.6s ▶
✅ faq_faq_0029 如何申請 DOI 註冊？ 分數: 1.00 11.6s ▶
✅ faq_faq_0030 DOI 可以用於哪些類型的數位物件？ 分數: 1.00 8.8s ▶
✅ faq_faq_0031 什麼是是科探索 Ainosco Search？ 分數: 1.00 14.5s ▶
✅ faq_faq_0032 是科探索有什麼特色功能？ 分數: 1.00 10.4s ▶
✅ faq_faq_0033 是科探索適合哪些使用情境？ 分數: 0.80 13.0s ▶
✅ faq_faq_0034 如何使用是科探索？ 分數: 1.00 16.7s ▶
✅ faq_faq_0035 是科探索與 Airiti Library 如何搭配使用？ 分數: 1.00 13.2s ▶
✅ faq_faq_0036 什麼是 iRead eBooks 華藝電子書？ 分數: 1.00 11.2s ▶
✅ faq_faq_0037 個人可以使用華藝電子書嗎？ 分數: 1.00 10.7s ▶
✅ faq_faq_0038 如何購買或試用華藝電子書？ 分數: 1.00 17.5s ▶
✅ faq_faq_0039 華藝電子書有什麼特色功能？ 分數: 1.00 10.5s ▶
✅ faq_faq_0040 什麼是 ACI 學術引用文獻資料庫？ 分數: 1.00 11.1s ▶
✅ faq_faq_0041 ACI 收錄哪些學門的期刊？ 分數: 1.00 9.9s ▶
✅ faq_faq_0042 如何使用 ACI 查詢引用資料？ 分數: 1.00 13.9s ▶
✅ faq_faq_0043 如何將期刊授權給 Airiti Library？ 分數: 1.00 14.5s ▶
✅ faq_faq_0044 授權華藝有什麼優勢？ 分數: 1.00 21.7s ▶
✅ faq_faq_0045 期刊出版者可以獲得哪些服務？ 分數: 0.90 16.8s ▶
✅ faq_faq_0046 機構如何訂閱 Airiti Library？ 分數: 1.00 15.5s ▶
✅ faq_faq_0047 Airiti Library 有哪些訂閱方案？ 分數: 1.00 14.8s ▶
✅ faq_faq_0048 可以申請 Airiti Library 試用嗎？ 分數: 1.00 10.4s ▶
✅ faq_faq_0049 什麼是 iCheers 愛酒窩？ 分數: 1.00 9.8s ▶
❌ faq_faq_0050 iCheers 販售哪些類型的酒？ 分數: 0.00 8.6s ▶
✅ faq_faq_0051 iCheers 可以查詢哪些酒款資訊？ 分數: 1.00 10.6s ▶
❌ faq_faq_0052 什麼是梅洛葡萄品種？ 分數: 0.00 8.3s ▶
❌ faq_faq_0053 什麼是麗絲玲葡萄品種？ 分數: 0.00 8.3s ▶
✅ faq_faq_0054 iCheers 有提供調酒推薦嗎？ 分數: 1.00 10.2s ▶
✅ faq_faq_0055 Airiti Library 支援哪些瀏覽器？ 分數: 1.00 8.3s ▶
✅ faq_faq_0056 如何設定校外連線 Proxy？ 分數: 1.00 12.4s ▶
✅ faq_faq_0057 為什麼頁面載入很慢？ 分數: 1.00 12.1s ▶
✅ faq_faq_0058 忘記密碼怎麼辦？ 分數: 1.00 11.5s ▶
✅ faq_faq_0059 什麼是臺灣學術傳播獎？ 分數: 0.90 16.0s ▶
✅ faq_faq_0060 什麼是看見臺灣專訪計畫？ 分數: 0.90 14.0s ▶
✅ faq_faq_0061 華藝報馬仔 Blog 提供什麼內容？ 分數: 0.97 13.0s ▶
✅ faq_faq_0062 如何查詢熱門研究議題？ 分數: 1.00 15.5s ▶
✅ faq_faq_0063 海外使用者最關心什麼研究主題？ 分數: 0.80 10.8s ▶
✅ faq_faq_0064 如何取得期刊下載統計報告？ 分數: 1.00 12.5s ▶
✅ faq_faq_0065 什麼是 TSSCI？ 分數: 1.00 9.4s ▶
✅ faq_faq_0066 什麼是 THCI？ 分數: 1.00 8.4s ▶
✅ faq_faq_0067 如何查詢期刊是否收錄於 TSSCI/THCI？ 分數: 1.00 14.4s ▶
✅ faq_faq_0068 如何在 Airiti Library 搜尋碩博士論文？ 分數: 1.00 10.3s ▶
✅ faq_faq_0069 Airiti Library 收錄哪些學校的碩博士論文？ 分數: 1.00 13.9s ▶
✅ faq_faq_0070 碩博士論文可以下載全文嗎？ 分數: 1.00 11.5s ▶
✅ faq_faq_0071 什麼是會議論文集？ 分數: 1.00 8.6s ▶
✅ faq_faq_0072 如何搜尋會議論文？ 分數: 1.00 11.7s ▶
✅ faq_faq_0073 Airiti Library 如何保護用戶隱私？ 分數: 1.00 11.6s ▶
✅ faq_faq_0074 文獻資料是否安全？ 分數: 1.00 9.7s ▶
✅ faq_faq_0075 華藝與哪些國際機構合作？ 分數: 0.90 12.1s ▶
✅ faq_faq_0076 什麼是 ORCID 整合服務？ 分數: 1.00 9.7s ▶
✅ faq_faq_0077 華藝數位的 ESG 政策是什麼？ 分數: 0.70 15.7s ▶
✅ faq_faq_0078 什麼是開放取用 Open Access？ 分數: 1.00 9.3s ▶
✅ faq_faq_0079 如何找到開放取用的文獻？ 分數: 1.00 12.3s ▶
✅ faq_faq_0080 華藝數位有在招募人才嗎？ 分數: 0.93 16.7s ▶
❌ faq_faq_0081 華藝數位有哪些部門？ 分數: 0.42 15.5s ▶
✅ faq_faq_0082 如何正確引用 Airiti Library 的文獻？ 分數: 1.00 14.7s ▶
✅ faq_faq_0083 APA 第 7 版引用格式是什麼？ 分數: 1.00 14.3s ▶
✅ faq_faq_0084 可以批量下載文獻嗎？ 分數: 1.00 12.0s ▶
✅ faq_faq_0085 如何批量匯出書目資訊？ 分數: 1.00 16.5s ▶
✅ faq_faq_0086 Airiti Library 提供 API 服務嗎？ 分數: 1.00 9.6s ▶
❌ faq_faq_0087 發現文獻資料錯誤怎麼辦？ 分數: 0.00 13.1s ▶
✅ faq_faq_0088 如何提供建議或意見？ 分數: 1.00 10.2s ▶
✅ faq_faq_0089 如何得知 Airiti Library 的新功能？ 分數: 1.00 11.9s ▶
❌ faq_faq_0090 Airiti Library 最近有什麼新功能？ 分數: 0.56 20.1s ▶
✅ faq_faq_0091 如何產生 DOI 的 QR Code？ 分數: 0.97 9.9s ▶
✅ faq_faq_0092 什麼是 DOI 比對器？ 分數: 1.00 10.1s ▶
✅ faq_faq_0093 如何查看我的閱讀紀錄？ 分數: 1.00 9.3s ▶
✅ faq_faq_0094 可以追蹤特定期刊的更新嗎？ 分數: 1.00 9.4s ▶
✅ faq_faq_0095 Airiti Library 有收錄影音資源嗎？ 分數: 1.00 11.0s ▶
✅ faq_faq_0096 可以列印文獻嗎？ 分數: 1.00 9.5s ▶
✅ faq_faq_0097 可以離線閱讀嗎？ 分數: 1.00 9.0s ▶
✅ faq_faq_0098 如何修改會員資料？ 分數: 1.00 10.0s ▶
✅ faq_faq_0099 可以刪除會員帳號嗎？ 分數: 1.00 12.2s ▶
✅ faq_faq_0100 Airiti Library 的文獻有英文摘要嗎？ 分數: 1.00 8.6s ▶