Files
xiaobailing-turn-detection/experiments/maai-ch-kyoto/results/streaming/对比分析.txt
T

14 lines
1.0 KiB
Plaintext

VAP 流式场景判断点对比(阈值严格 > 0.5)
模型 | 有效点/有标签点 | 正确数 | 准确率 | 误放行 FP | 误阻止 FN | 对 CPC 双声道变化
CPC 降噪双声道 | 44/44 | 30 | 68.18% | 7 | 7 | +0.00 个百分点
CPC 降噪机器人静音 | 44/44 | 24 | 54.55% | 18 | 2 | -13.64 个百分点
Mimi 标准双声道 | 44/44 | 31 | 70.45% | 5 | 8 | +2.27 个百分点
Mimi 降噪双声道 | 44/44 | 34 | 77.27% | 5 | 5 | +9.09 个百分点
1. 本表使用连续推理在判断时刻已经产生的最新分数,与前端 VAP 圆点和悬停分数一致;不使用独立窗口结果。
2. 每个有效点记录 decision_ms、score_time_ms、score_age_ms;启动期或超过两倍更新间隔的旧分数不计为 0,而是不可用。
3. 数据为六通录音中的选定点,只做描述性比较;下一步宜扩充按通话隔离的测试集,再在验证集上选择阈值。
复现:在 MaAI 独立 uv 环境运行 python evaluate_streaming.py all。原独立窗口结果保留在原目录,另作历史诊断。