---
title: "My RAG evaluation was lying to me, twice!!"
canonical: "https://siyuanailab.com/curation/entry/6a7486e75ea5b70d84fd8b3aa2051c44/"
dateModified: "2026-09-26"
datePublished: "2026-09-26"
---

[← 返回日报](https://siyuanailab.com/curation/#entry/6a7486e75ea5b70d84fd8b3aa2051c44)

AI / 中文摘编收录于 2026-09-26

# My RAG evaluation was lying to me, twice!!

原始来源

- [DEV Community · My RAG evaluation was lying to me, twice!! ↗](https://dev.to/jerry_qian_72ad9b2386d3d0/my-rag-evaluation-was-lying-to-me-twice-45n9)原文发布：2026/9/26 05:47:02（北京时间）

这是作者在特定Wikipedia问答语料和个人实现上的实验，文章仅采样到部分片段；不可外推为所有RAG语料或检索系统的普遍结论，也无法据此核验完整实验。

## 中文摘编

作者称其RAG实验中，修正数字分组的字符串匹配指标后，检索命中率随k从3到10由79%升至83%，而原指标显示约65%至67%，并报告20题样本对结果分辨力不足。

依据来源材料整理，保留事实、观点与适用范围的区别。  
完整上下文请阅读原始来源。

© 2026 思远 AI Labs