[数字分身] 影子模式执行引擎 — 生成建议不执行,对比人类决策 #54

Closed
opened 2026-05-10 15:28:05 +08:00 by admin · 0 comments
Owner

目标

在代理执行之前,先以影子模式运行:生成建议但不自动执行,与人类实际决策对比,计算准确率。

核心逻辑

用户触发操作 → 数字分身同步生成建议 → 建议仅对用户可见(影子)→ 用户实际操作 vs 影子建议 → 对比记录 → 准确率达标(如 >90%)→ 解锁代理模式

影子模式场景

场景 影子动作 对比维度
PR审核 生成审核意见 相同问题是否被指出
邮件回复 草拟回复 意图是否一致
需求评估 给出工时 偏差是否在20%内

准确率仪表

  • 每个场景独立计算影子准确率
  • 准确率 > 90% 持续 2 周 → 自动解锁代理模式
  • 准确率 < 70% → 回退到观察模式

新增文件

  • backend/app/services/shadow_executor.py
  • backend/app/models/shadow_comparison.py
  • 前端:数字分身页面新增影子准确率卡片
## 目标 在代理执行之前,先以影子模式运行:生成建议但不自动执行,与人类实际决策对比,计算准确率。 ## 核心逻辑 用户触发操作 → 数字分身同步生成建议 → 建议仅对用户可见(影子)→ 用户实际操作 vs 影子建议 → 对比记录 → 准确率达标(如 >90%)→ 解锁代理模式 ## 影子模式场景 | 场景 | 影子动作 | 对比维度 | |------|---------|---------| | PR审核 | 生成审核意见 | 相同问题是否被指出 | | 邮件回复 | 草拟回复 | 意图是否一致 | | 需求评估 | 给出工时 | 偏差是否在20%内 | ## 准确率仪表 - 每个场景独立计算影子准确率 - 准确率 > 90% 持续 2 周 → 自动解锁代理模式 - 准确率 < 70% → 回退到观察模式 ## 新增文件 - backend/app/services/shadow_executor.py - backend/app/models/shadow_comparison.py - 前端:数字分身页面新增影子准确率卡片
admin closed this issue 2026-05-10 17:58:08 +08:00
Sign in to join this conversation.
No Label
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: admin/aiagent#54