10.12 评测与数据
所属:全栈开发面试题库 / 10 AI 应用开发:LLM 与 Agent
覆盖范围
- 评测集构建与标注
- RAG 评测(RAGAS/召回率/忠实度)
- 合成数据与数据清洗
- A/B 与线上回归
子主题
| 编号 | 主题 | 核心内容 |
|---|---|---|
| 10.12.1 | 评测集构建与标注 | 评测集设计、标注规范、人工标注、标注质量控制 |
| 10.12.2 | RAG 评测 RAGAS/召回率/忠实度 | RAGAS 指标、召回率、忠实度、答案相关性、RAG 评测方法 |
| 10.12.3 | 合成数据与数据清洗 | 合成数据生成、数据清洗、去重、质量过滤、数据配比 |
| 10.12.4 | A/B 与线上回归 | A/B 测试设计、线上指标、回归测试、灰度发布、效果监控 |
高频题索引
| 编号 | 题目 | 难度 | 频率 | 所在页面 |
|---|---|---|---|---|
| 10.12.1-001 | LLM 评测集怎么构建? | 中 | 高 | 10.12.1 |
| 10.12.2-001 | RAGAS 有哪些核心指标? | 中 | 高 | 10.12.2 |
| 10.12.3-001 | 合成数据怎么用? | 中 | 中 | 10.12.3 |
| 10.12.4-001 | LLM 应用怎么做 A/B 测试? | 中 | 中 | 10.12.4 |
当前状态
- 4 个主题页,每主题页 8 题,合计 32 题。
- 评测指标定义、RAGAS 版本以官方文档为准,本章节不编造固定数值。