ila/yovision
1
0
Fork 0
Code Issues 14 Pull Requests 14 Actions Packages Projects Releases Wiki Activity

[QA] 两周Dry-run标注、效果与SLA验收 #187

New Issue
Open
opened 2026-09-01 10:05:10 +08:00 by ila · 0 comments
ila commented 2026-09-01 10:05:10 +08:00
Owner
Copy Link
Copy Source

状态

待实施（规划已确认；两周 dry-run 前置未满足）

基本信息

  • 所属 Epic：#7
  • 所属 MVP：#174
  • 规划来源：#173
  • 主项目：YoVision
  • 主 agent：单一 QA/coordination agent
  • 前置：#176 门禁完成；#179/#180/#181/#185/#186 验收

目标

用冻结的 16 路机位、规则/模型版本、样本窗口和标注口径执行不少于两周 dry-run，按规则版本统计样本量、召回率、每路每天误报数、事件/证据/通知投递与 ack SLA，并记录客户确认或未通过结论。

非目标

  • 不把真实视频、未脱敏抓拍、联系人或个人数据提交到 Git/工单/Wiki
  • 不使用跨场景统一准确率
  • 不在阈值未确认时自行判定通过
  • 不边测边静默修改规则/模型版本

精确 write_paths

  • scripts/pilot/dry-run/
  • tests/pilot/evaluation/
  • pilot/templates/evaluation/

除上述路径外禁止写入；新增路径必须先更新工单并取得确认。

验收标准

  • 开始前冻结机位、输入 Profile、规则/模型版本、时间窗口、标注人和口径
  • 至少连续覆盖已确认的两周窗口，暂停/数据缺口明确记录
  • 越线、危险区域、聚集分别报告样本量、召回率和每路每天误报数
  • 事件、证据、通知和 ack SLA 分阶段报告，不混为一个时延
  • 规则/模型调整创建新版本并重新划分统计窗口
  • 只提交脱敏汇总、模板和校验脚本，原始受控数据留在批准位置
  • 客户/法务/运维对结果给出通过、条件通过或不通过结论

风险与回退

从当前 dev 建立独立协调分支；实施前复核全部前置和现场门禁。脚本只能管理自身创建且身份校验通过的进程、数据库和临时资源；不得删除客户数据、历史事件、Outbox、Receipt、Alert、投递或审计事实。失败时先停用 connector/通知并保持三端独立。

文档影响

长期阈值和结论经确认后更新 Product-Requirements、Product-Roadmap、Deployment-and-Operations；原始样本不进入 Wiki/Git。

## 状态 待实施（规划已确认；两周 dry-run 前置未满足） ## 基本信息 - 所属 Epic：#7 - 所属 MVP：#174 - 规划来源：#173 - 主项目：YoVision - 主 agent：单一 QA/coordination agent - 前置：#176 门禁完成；#179/#180/#181/#185/#186 验收 ## 目标 用冻结的 16 路机位、规则/模型版本、样本窗口和标注口径执行不少于两周 dry-run，按规则版本统计样本量、召回率、每路每天误报数、事件/证据/通知投递与 ack SLA，并记录客户确认或未通过结论。 ## 非目标 - 不把真实视频、未脱敏抓拍、联系人或个人数据提交到 Git/工单/Wiki - 不使用跨场景统一准确率 - 不在阈值未确认时自行判定通过 - 不边测边静默修改规则/模型版本 ## 精确 write_paths - `scripts/pilot/dry-run/` - `tests/pilot/evaluation/` - `pilot/templates/evaluation/` 除上述路径外禁止写入；新增路径必须先更新工单并取得确认。 ## 验收标准 - [ ] 开始前冻结机位、输入 Profile、规则/模型版本、时间窗口、标注人和口径 - [ ] 至少连续覆盖已确认的两周窗口，暂停/数据缺口明确记录 - [ ] 越线、危险区域、聚集分别报告样本量、召回率和每路每天误报数 - [ ] 事件、证据、通知和 ack SLA 分阶段报告，不混为一个时延 - [ ] 规则/模型调整创建新版本并重新划分统计窗口 - [ ] 只提交脱敏汇总、模板和校验脚本，原始受控数据留在批准位置 - [ ] 客户/法务/运维对结果给出通过、条件通过或不通过结论 ## 风险与回退 从当前 `dev` 建立独立协调分支；实施前复核全部前置和现场门禁。脚本只能管理自身创建且身份校验通过的进程、数据库和临时资源；不得删除客户数据、历史事件、Outbox、Receipt、Alert、投递或审计事实。失败时先停用 connector/通知并保持三端独立。 ## 文档影响 长期阈值和结论经确认后更新 Product-Requirements、Product-Roadmap、Deployment-and-Operations；原始样本不进入 Wiki/Git。
Sign in to join this conversation.
No Branch/Tag Specified
Branches Tags
Labels
Clear labels
area/ux
UI/UX 与交互原型
 kind/epic
长期产品目标
 kind/mvp
可独立验收的最小版本
 kind/task
单元实施任务
 priority/p0
首个纵切必需能力
 project/bell
Bell 项目
 project/brain
Brain 项目
 project/sense
Sense 项目
 scope/coordination
跨项目协调任务
 scope/independent
不依赖其他项目在线的项目内任务
No labels kind/task priority/p0 project/bell project/brain project/sense scope/coordination
Milestone
No items
No Milestone
Projects
Clear projects
No projects
Assignees
Clear assignees
ila
No Assignees
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: ila/yovision#187