Files
my-vault/01_Projects/Personal-Tech/LLM_Evaluation/03-Practice/01-go-docs-qa/00-project-overview.md
T

2.5 KiB
Raw Blame History

type, status, project_type, created
type status project_type created
project active rag-eval 2026-08-24

Go 官方文档约束下的技术问答

问题与范围

  • 任务名称:公开文档约束下的技术问答(Go 模块发布流程)
  • 用户输入:一个问题 + 一段 Go 官方文档片段(release-workflow 页)
  • 系统输出:简短回答 + 文档引用位置

一句话成功条件

回答中的关键事实均可由给定文档片段支持;资料不足时明确说明

示例问题(Level 1 出口)

类型 示例问题 依据
能回答 发布前如何用本地目录测试未发布模块? 片段:"try it while it is in a directory local to your calling code"
不能回答 发 alpha 前是否必须先 go test 片段未提及测试要求;应拒答或说明资料不足

三类失败

  1. 无依据事实:回答包含上下文未支持的关键事实
  2. 过度肯定:把文档没保证的说成保证
  3. 引用错误:声称引用了文档但实际无此表述

非目标

  • 不评价文档外的 Go 常识正确性(如 semver、/v2 后缀)

数据来源 / 许可

  • 来源:Go 官方文档 Module release and versioning workflow URLhttps://go.dev/doc/modules/release-workflow 日期:2026-08-24
  • 许可:Go 文档(BSD 风格)/ PII 政策:N/A(公开技术文档,无个人数据)
  • 输入上下文正文:冻结于 02-case-design.md 顶部"输入上下文(冻结快照)"小节

主要风险

  • 无依据补全(幻觉)、凭常识硬答、引用错位

当前版本

  • dataset_versionv0.1 rubric_versionv0.1 最近 run:无

关键链接

  • 工作表:02-First-Week-Worksheet
  • 代码仓库:TBD(尚未创建,创建后填入 GitHub URL)
  • 数据集:datasets/eval-v0.1.jsonl
  • 最近报告:reports/report-v0.1.md

下一步最小动作

  • 填写 01-task-and-rubric.md 的 rubric 三维度(对应 02-First-Week-Worksheet 第 1 节)
  • 项目骨架 0305 已从 _template/ 复制(待首次 run 时填写)
  • 对着 02-case-design.md 顶部"输入上下文(冻结快照)"填写 10 个 case

返回 01_Projects/Personal-Tech/LLM_Evaluation/03-Practice/README

[You have received this identical output 5 times. Re-reading '/Users/windy/Documents/vault/my-vault/01_Projects/Personal-Tech/LLM_Evaluation/03-Practice/01-go-docs-qa/00-project-overview.md:raw' will not change it — use a narrower selector (path:A-B), or proceed with the edit.]