整体指标仪表盘
加载中...
实验示例卡片：方向 A · 模块改进
✅ 状态示例
来源: docs/实验设计文档.md |
实现: src/models/module.py |
分析: analysis/experiment_analysis.ipynb
① 核心指标：N 组变体对比（val 集口径）
⚠️ 口径约定：主表为 val 集 (agg0) 口径，test 集 (agg1) 并列给出。
| 变体 | Val Macro AUROC (agg0) [95% CI] | Test Macro AUROC (agg1) | Δ val (pp) | Δ test (pp) | 参数量 | 判定 |
|---|---|---|---|---|---|---|
| 变体 1（最优示例） | 0.8xxx [0.8xxx, 0.8xxx] | 0.8xxx | +0.xx | +0.xx | ~x.xM | 🟡 0.5~1pp |
| 变体 2 | 0.8xxx [0.8xxx, 0.8xxx] | 0.8xxx | +0.xx | −0.xx | ~x.xM | 🟢 <0.5pp |
| 对照（原结构） | 0.8xxx [0.8xxx, 0.8xxx] | 0.8xxx | 0.00 | 0.00 | 0.xxM | baseline |
| 变体 3 | 0.8xxx [0.8xxx, 0.8xxx] | 0.8xxx | −0.xx | −0.xx | ~x.xM | 🔴 下跌 |
图片占位：结果对比图
（替换为你的分析图 <img src="...">）
（替换为你的分析图 <img src="...">）
图 1 · 各变体指标对比（占位图注）
| 维度 | 分组 | N | mean Δ (pp) | 改善率 |
|---|---|---|---|---|
| 按某属性分组 | 分组 1 | xxx | +0.xx | xx.x% |
| 分组 2 | xxx | +0.xx | xx.x% | |
| 分组 3 | xxx | +0.xx | xx.x% |
图片占位：消融直方图
分组 Δ 直方图（占位图注）
图片占位：散点图
属性 vs Δ 散点图（占位图注）
| 优先级 | 任务 | 说明 |
|---|---|---|
| ✅ 已闭环 | 已完成，（结论一句话） | |
| ⭐ 主线 | 示例主线任务 | 消融指向的下一步方向，（说明） |
| 叠加 | 示例叠加实验 | 验证与其它方向的正交叠加效果 |
| 写作 | 示例写作任务 | （章节/叙事说明） |
📌 问题：（在此填写问题背景。本卡片是「实验卡片」的完整写法示范，结构为：问题背景 → ① 对比实验 → ② 消融分析 → ③ 后续行动，可按需增减小节。）
📐 关键发现：（在此填写结论，例如：变体 1 是唯一通过门槛的方案（CI 下界 > 对照点估计），涨幅具有统计可靠性；变体 3 不涨反跌，原因分析……）
② 消融分析：增益来源
📌 两种假设，「增益从哪里来」：(a) 假设一（如结构信息被利用）；(b) 假设二（如独立参数化带来增益）。可检验的预测：（写出两种假设各自可区分的预测，例如 (a) 预测某类样本受益更多，Δ 应随某属性递增；(b) 预测增益均匀分布。）
数据与假设的对照：（在此填写分组统计是否支持假设 (a)，例如：各组 Δ 几乎相同、秩相关 ρ ≈ 0 且不显著，说明「随某属性递增」的趋势在统计上不存在。）
📐 消融结论：（在此填写消融裁决，增益来自哪种机制、如何支持/否定了哪种假设。）
设计文档：docs/实验设计文档.md |
实现：src/models/module.py |
脚本：src/run_experiment.sh |
分析：analysis/experiment_analysis.ipynb | 图片：analysis/experiment_*.png
每周进度安排
加载中...
本周任务
加载中...
加载中...
⏳
正在加载数据...