reconcile LLM_Evaluation zone: align stage numbering and scopes, standardize full-path wikilinks, slim old guidebook notes, dedupe templates
- fix stage-numbering conflict (README vs 05-Progress) and unify stage-1 reading scope - resolve AWS workshop prerequisite contradiction in 04-Reference/01 - convert medium-path wikilinks to vault-root paths (~30 links), fix .pyy typos, annotate ragas fork, unify archive status, add 01-/02- README hubs - compress old-version guidebook notes (01, 05) into pointers; add 2026 reading guidance to 00-Overview - dedupe project templates and remove embedded template copy in 03-Practice/README
This commit is contained in:
@@ -0,0 +1,46 @@
|
||||
---
|
||||
type: progress
|
||||
tags:
|
||||
- llm-evaluation
|
||||
- progress
|
||||
status: active
|
||||
created: 2026-08-21
|
||||
---
|
||||
|
||||
# 当前位置与下一步
|
||||
|
||||
> **使用方式:** 每次学习结束时花 5 分钟更新本文件。它是你打开专区后第一个应该看的地方——比任何目录都更能告诉你"我在哪、下一步做什么"。
|
||||
|
||||
## 我现在的阶段
|
||||
|
||||
- [ ] **阶段 1:有界理论**(读 00-Foundations 三篇 + 01-Start-Here + 02-Why-Guide,约 3-4 小时)
|
||||
- [ ] **阶段 2:出口检查**:学习看板 Level 1 全部勾选 + 首周工作表第 0 节填完
|
||||
- [ ] **阶段 3:实践**(工作表 1-6 节 → 复制 `03-Practice/_template/` 建立第一个项目)
|
||||
- [ ] **阶段 4:按需回补**(04-Reference 按各自"前置阶段"插入项目推进过程)
|
||||
|
||||
**当前状态:** 阶段 1(有界理论)· 未开始 · 更新于 2026-08-21
|
||||
|
||||
## 正在做什么
|
||||
|
||||
- (示例:读 [[01-What-Is-LLM-Evaluation]],已完成 → 写一条"能回答/不能回答"的问题填入工作表第 0 节)
|
||||
|
||||
## 卡点(写下来,下次从这里继续)
|
||||
|
||||
- 无 / 或:xxx 概念没看懂,卡在……
|
||||
|
||||
## 下一步最小动作
|
||||
|
||||
- [ ] 读 [[01-What-Is-LLM-Evaluation|什么是 LLM Evaluation]]
|
||||
- [ ] 完成 [[00-Start-Here|开始这里]] 的十分钟动作
|
||||
|
||||
## 相关链接
|
||||
|
||||
- 学习主线:[[01_Projects/Personal-Tech/LLM_Evaluation/README|专区首页]]
|
||||
- 进度勾选:[[01-Learning-Board|学习看板]]
|
||||
- 填写入口:[[02-First-Week-Worksheet|首周工作表]]
|
||||
- 学习周记:[[01-学习周记]]
|
||||
- 季度复盘:[[02-方法季度复盘]]
|
||||
|
||||
---
|
||||
|
||||
返回 [[01_Projects/Personal-Tech/LLM_Evaluation/README|学习专区首页]]。
|
||||
@@ -0,0 +1,45 @@
|
||||
---
|
||||
type: log
|
||||
tags:
|
||||
- llm-evaluation
|
||||
- progress
|
||||
- journal
|
||||
status: active
|
||||
created: 2026-08-21
|
||||
---
|
||||
|
||||
# 学习周记
|
||||
|
||||
> **使用方式:** 每周一次(或每次学习后),复制下方模板,把日期改为当周,插到文件**最顶部**(最新在上)。周记是你"学习过程"的存档处:学习看板只负责勾选,周记负责记录发生了什么。
|
||||
|
||||
## 模板(复制这一块,改日期后插到最上方)
|
||||
|
||||
```markdown
|
||||
## YYYY-MM-DD | 第 N 周
|
||||
|
||||
### 本周目标
|
||||
|
||||
### 本周理论理解(用自己的话复述,链接回原笔记)
|
||||
|
||||
- 概念:……(我的理解:……)
|
||||
- 链接:[[01-What-Is-LLM-Evaluation]] / [[03-Core-Concept-Map]]
|
||||
- 卡住的地方:……
|
||||
|
||||
### 本周实践
|
||||
|
||||
- 我新定义了什么成功 / 失败条件?
|
||||
- 我新增或修订了哪些 case?为什么?
|
||||
- 本周主要失败类型是什么?
|
||||
|
||||
### 实验与结果
|
||||
|
||||
- 我改变了什么?预期是什么?实际发生了什么?
|
||||
|
||||
### 下周只保留的一个最小动作
|
||||
```
|
||||
|
||||
> 复盘问题与学习看板 Level 1–3 的闭环检查项一致(见 [[01-Learning-Board|学习看板]])。第一个项目尚未建立时,实践小节可以写"填了工作表第几节、写了几个 case"——学习过程不因没有项目而中断。
|
||||
|
||||
---
|
||||
|
||||
返回 [[01_Projects/Personal-Tech/LLM_Evaluation/README|学习专区首页]]。
|
||||
@@ -0,0 +1,45 @@
|
||||
---
|
||||
type: log
|
||||
tags:
|
||||
- llm-evaluation
|
||||
- progress
|
||||
- review
|
||||
status: active
|
||||
created: 2026-08-21
|
||||
---
|
||||
|
||||
# 方法季度复盘(含作品集清单)
|
||||
|
||||
> **使用方式:** 每季度一次(约第 12 周)。复盘对象是**这套学习方法本身**,不是单个项目(单个项目的复盘在 `03-Practice/项目名/04-失败复盘.md`)。
|
||||
|
||||
## 方法论自评
|
||||
|
||||
1. "先建立判断,再追求自动化"是否真的让我少走了弯路?请给一个具体例子。
|
||||
2. 我是否在"读完理论"上花了比计划更多的时间?当时应该在哪一步停下?
|
||||
3. 手工盲评是否帮我发现了规则问题?哪些坑是读文章学不到的?
|
||||
4. 哪个环节最浪费时间?下一个季度砍掉什么?
|
||||
5. 我的失败分类是否真的指导了修复,还是只是写了报告?
|
||||
|
||||
## 作品集检查清单
|
||||
|
||||
> 来源:[[01-LLM-Evaluation-Roadmap]] 第十二节。做满 3 个月后,把最能证明工程闭环的项目整理成作品集。
|
||||
|
||||
- [ ] GitHub 仓库 README:问题 / 数据说明 / 评测方法 / 结果,四节
|
||||
- [ ] 数据卡:来源、构造、偏差、许可、PII、版本
|
||||
- [ ] 评测报告:类别通过率、失败分类、修复前后对比
|
||||
- [ ] 3 分钟录屏:改一个 prompt → 跑 runner → 展示回归变化
|
||||
- [ ] 一条技术复盘(具体发现,而非"我学了大模型")
|
||||
|
||||
### 公开前合规检查
|
||||
|
||||
- [ ] 无真实用户输入 / 无密钥或 token / 无内部路径或私有代码 / 无个人信息
|
||||
- [ ] 外部资料有许可与出处;合成数据明确标注为合成
|
||||
|
||||
## 内容保鲜(可选,每季度)
|
||||
|
||||
- [ ] 检查专区外部链接是否有失效或已关停(如 OpenAI Evals 平台已宣布 2026-11 关停)
|
||||
- [ ] 更新 [[01_Projects/Personal-Tech/LLM_Evaluation/04-Reference/README|04-Reference 资源地图]] 的前置阶段标注
|
||||
|
||||
---
|
||||
|
||||
返回 [[01_Projects/Personal-Tech/LLM_Evaluation/README|学习专区首页]]。
|
||||
Reference in New Issue
Block a user