NLP / 大语言模型 · 2020 · RAG
Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks
Patrick Lewis et al.
将参数化生成模型与可检索的外部文档记忆结合。
检索增强开放域问答知识库
复现空间 · 建议计划
进阶 · 小规模训练 · 编辑建议,尚未实测
最小实验目标
搭建固定语料的检索问答基线,对比不检索、随机文档与 top-k 文档。
数据集 / 环境
Natural Questions 子集与固定版本 Wikipedia 索引。
评估项
- Exact Match
- 检索 Recall@k
边界与常见偏差
防止答案泄漏;通用向量检索加提示词只是教学对照,不自动等价于论文的联合训练 RAG。
实验验收协议
- 阅读原文,选定要对齐的具体表格、模型变体与数据划分;把缩小规模或替换组件单独列出。
- 核对作者资源的许可与依赖,锁定代码 commit、权重版本、硬件、随机种子和完整运行命令。
- 先完成数据与推理检查,再执行约定的实验;记录多次运行结果、资源消耗和失败案例。
- 提交可核验的代码、配置、日志与报告。原论文数值须注明表格和协议,当前指标必须附实际运行证据。
实验记录
- 原论文对齐目标
- 待认领后选定具体表格与评估条件
- 社区复现指标
- 暂无已验证结果
暂无实验日志与复现报告。收录此论文不表示社区已完成训练或评估;后续记录通过仓库 Issue 和 Pull Request 补充。