wehub-skill-sync
2.8 KiB
2.8 KiB
评估管线流程图
生产环境评估管线的可视化布局。
┌─────────────────────────────────────────────────┐
│ 评估管线 │
├─────────────────────────────────────────────────┤
│ │
│ 输入：回复 + 提示 + 上下文 │
│ │ │
│ ▼ │
│ ┌─────────────────────┐ │
│ │ 标准加载器 │ ◄── 评分细则、权重 │
│ └──────────┬──────────┘ │
│ │ │
│ ▼ │
│ ┌─────────────────────┐ │
│ │ 主评分器 │ ◄── 直接评分或成对比较 │
│ └──────────┬──────────┘ │
│ │ │
│ ▼ │
│ ┌─────────────────────┐ │
│ │ 偏差缓解 │ ◄── 位置交换等 │
│ └──────────┬──────────┘ │
│ │ │
│ ▼ │
│ ┌─────────────────────┐ │
│ │ 置信度评分 │ ◄── 校准 │
│ └──────────┬──────────┘ │
│ │ │
│ ▼ │
│ 输出：分数 + 理由说明 + 置信度 │
│ │
└─────────────────────────────────────────────────┘
管线阶段
- 标准加载器：从配置中加载评分细则和标准权重
- 主评分器：执行直接评分或成对比较
- 偏差缓解：运行位置交换、长度归一化及其他去偏处理
- 置信度评分：基于位置一致性和证据强度校准置信度