系统评估

RAG-系统评估

RAG评估构建好一个RAG系统后，应该如何评判这个系统的好坏？如何快速定位问题根源？ 典型失败模式 检索器问题：检索结果与需求不相关（检索了完全不相关的文档或数据）、遗漏关键信息（Top-K没有包揽核心论点）、刻舟求剑（返回了历史过期版本的信息） 生成器问题：忽略正确的检索上下文信息、脱离上下文，产生知识幻觉、答非所问…