從蒐集到搜尋：人文生成式AI建置的挑戰與對策

摘要

本演講「從蒐集到搜尋：人文生成式AI建置的挑戰與對策」將深入分享我在Taihucais計畫中的實務經驗，首先說明如何從文史典籍與檔案資料建立結構化蒐集與品質管控流程；接著重點介紹我們研發的自動生成Benchmark方法論——透過自動化流程自動構建評測指標，公正量化衡量檢索準確度與生成品質；然後說明向量化索引結構、檢索結果融合與Prompt優化在RAG系統開發中的核心技術；並細談模型選擇時於保障資料隱密性與維持模型檢索生成能力間的平衡策略；最後展望如何將此架構擴展至國家圖書館台鵠系統，以及未來在開放資料平台與產業應用中的實踐建議，期望為台灣人文研究打造一套高效、可持續的AI搜尋生態。