2.5 KiB
2.5 KiB
type, status, project_type, created
| type | status | project_type | created |
|---|---|---|---|
| project | active | rag-eval | 2026-08-24 |
Go 官方文档约束下的技术问答
问题与范围
- 任务名称:公开文档约束下的技术问答(Go 模块发布流程)
- 用户输入:一个问题 + 一段 Go 官方文档片段(release-workflow 页)
- 系统输出:简短回答 + 文档引用位置
一句话成功条件
回答中的关键事实均可由给定文档片段支持;资料不足时明确说明
示例问题(Level 1 出口)
| 类型 | 示例问题 | 依据 |
|---|---|---|
| 能回答 | 发布前如何用本地目录测试未发布模块? | 片段:"try it while it is in a directory local to your calling code" |
| 不能回答 | 发 alpha 前是否必须先 go test? |
片段未提及测试要求;应拒答或说明资料不足 |
三类失败
- 无依据事实:回答包含上下文未支持的关键事实
- 过度肯定:把文档没保证的说成保证
- 引用错误:声称引用了文档但实际无此表述
非目标
- 不评价文档外的 Go 常识正确性(如 semver、/v2 后缀)
数据来源 / 许可
- 来源:Go 官方文档 Module release and versioning workflow / URL:https://go.dev/doc/modules/release-workflow / 日期:2026-08-24
- 许可:Go 文档(BSD 风格)/ PII 政策:N/A(公开技术文档,无个人数据)
- 输入上下文正文:冻结于
02-case-design.md顶部"输入上下文(冻结快照)"小节
主要风险
- 无依据补全(幻觉)、凭常识硬答、引用错位
当前版本
- dataset_version:v0.1 / rubric_version:v0.1 / 最近 run:无
关键链接
- 工作表:02-First-Week-Worksheet
- 代码仓库:TBD(尚未创建,创建后填入 GitHub URL)
- 数据集:
datasets/eval-v0.1.jsonl - 最近报告:
reports/report-v0.1.md
下一步最小动作
- 填写
01-task-and-rubric.md的 rubric 三维度(对应 02-First-Week-Worksheet 第 1 节) - 项目骨架
03–05已从_template/复制(待首次 run 时填写) - 对着
02-case-design.md顶部"输入上下文(冻结快照)"填写 10 个 case
返回 01_Projects/Personal-Tech/LLM_Evaluation/03-Practice/README。
[You have received this identical output 5 times. Re-reading '/Users/windy/Documents/vault/my-vault/01_Projects/Personal-Tech/LLM_Evaluation/03-Practice/01-go-docs-qa/00-project-overview.md:raw' will not change it — use a narrower selector (path:A-B), or proceed with the edit.]