源电社区

评测协议

分省、分场景,不混用一套公式

湖北日前用 MAPE;省内现货(VPPForecast holdout 与 Algri)近零价用 SMAPE。榜与对照台按协议 ID 解释指标,不混算。

源电评测协议 · 湖北省间日前 v1

湖北省间日前购售价量。同一窗口、同一公式。正值序列下准确率 = 100% − MAPE。

ID · yd-hubei-da-v1市场 · 湖北省间现货v1.0.0

准确率 = 100% − MAPE

越高越好。业务上可直接理解为「这套预测有多靠谱」。

  1. 1. 市场范围

    本协议覆盖「湖北省间现货 · 日前」价量目标。省内现货 D+1 另见 yd-province-rt-v1;超短期 +2h 另见 yd-province-ust-v1;Algri 现货另见 yd-spot-rt-v1。后三者不以本协议的 MAPE 准确率混算。

  2. 2. 时间窗口

    验收默认近 30 个自然日(有实际出清的交易日)。单日对照以「目标日」24 小时、15 分钟粒度为准。

  3. 3. 预测时点

    日前预测须在目标日 D 的前一日生成(asOf = D−1)。事后拟合不得上榜。

  4. 4. 数据对齐

    预测与实际须对齐同一时间戳序列;缺失点不参与该点误差,但须在 Model Card 声明缺失比例。

  5. 5. 节假日与异常日

    纳入全样本统计,不单独剔除。可在详情页标注低准确率日,但不得从榜单分子分母中抹掉。

  6. 6. 上榜资格

    须声明数据版本、算法版本、复现三步,并链接本协议 ID。对照台「存成对照结果」生成的 Run 可分享,但不自动改写公开榜(榜由协议验收窗口计算)。

源电评测协议 · 省内现货日前 holdout v1

VPPForecast 省内现货日前电价。发行时点日历 D-2,目标为 D 日官方日前价;锚点为 D-1 同时段日前。Holdout 默认 2026-06-01 起。SMAPE 上界 200%;须同时报相对 D-1 持久化的 MAE / SMAPE。

ID · yd-province-da-v1市场 · 多省省内现货日前v1.0.0

SMAPE∈[0,200%];对照基线 = D-1 同时段日前价

先看是否打过 D-1 持久化,再看曲线与全日时点贴合。

  1. 1. 市场范围

    VPPForecast province_da 已覆盖的省内现货日前市场。同一天官方日前价为目标,不得把实时价当目标。

  2. 2. 预测时点

    须在目标日 D 的前两日生成(asOf = D−2)。D-1 日前市场已出清,可用作锚点与特征。

  3. 3. 验证方式

    Holdout:在 2026-06-01 之前训练一次,再对测试窗逐日打分。曲线须保留全日时点(96 或 24),不得降采样冒充。

  4. 4. 上榜资格

    须声明 province_da slug、lead_days=2、holdout 起止日,并同时报模型与 D-1 持久化的 MAE / SMAPE。

源电评测协议 · 省内现货实时 holdout v1

VPPForecast 省内现货实时电价。cutoff 前提前训练。默认 holdout 窗口 2026-04-20–2026-05-20(31 日);蒙西全网/呼包东/呼包西为 2026-08-01–2026-08-10(10 日)。SMAPE 公式上界 200%。SMAPE 较低时可贴合度 = 100%−SMAPE;蒙西等 SMAPE>50% 时主看 SMAPE、MAE 与相对日前,禁止把 100−SMAPE 当成「只有一成准」。

ID · yd-province-rt-v1市场 · 多省省内现货实时v1.2.2

SMAPE∈[0,200%];仅当 SMAPE<50% 时用 贴合度=100%−SMAPE

零价/负价/尖峰跳变时 SMAPE 可超过 100%。须同时报日前 SMAPE:市场本身很难时,模型接近日前并不等于「不准」。

  1. 1. 市场范围

    VPPForecast 已覆盖的省内现货实时市场(含蒙西全网/呼包东/呼包西与蒙东)。同一天 DA 已知,RT 特征仅用 ≥1 日滞后。

  2. 2. 验证方式

    默认 Holdout:在 2026-04-20 之前训练一次,再对 2026-04-20–2026-05-20 逐日打分。蒙西全网/呼包东/呼包西例外:在 2026-08-01 之前训练一次,再对 2026-08-01–2026-08-10 逐日打分(关分时替换后的算法)。各省使用优化后的 config(邻省/天气/分时专家/persistence 以 slug 为准)。2026-08 起部分省份的日前联络线/水电/非市场/火电竞价从 dw_boundary_conditions 补全后再上榜(holdout 标签 filled_ship)。不得用全样本回看曲线冒充 holdout。

  3. 3. 高 SMAPE 怎么读

    蒙西 holdout 模型 SMAPE 仍常高于 50%、日前也很高。100−SMAPE 不是业务准确率。应读 MAE、方向命中,以及是否明显差于日前。

  4. 4. 上榜资格

    须声明 province_rt slug、regime、数据版本与 holdout 起止日。

源电评测协议 · 省内现货超短期 +2h v1

VPPForecast 现货实时超短期。原点 t 可用当日已出清实时价,预测 t+2 小时。Holdout 2026-04-20–2026-05-20。达标:模型 MAE 低于把当前价当预测(persistence)。不要和 D+1、省间日前混算。

ID · yd-province-ust-v1市场 · 多省省内现货超短期v1.0.0

达标 ⇔ MAE(模型) < MAE(当前价);并同时报 MAE、相对当前价的方向命中

超短期有同日实时价,持久化是最强基线。打不过当前价,模型没有业务价值。

  1. 1. 市场范围

    湖北/广东/浙江/安徽/江苏/福建/广西/云南/贵州/海南/河北南网/辽宁/蒙西。与 D+1(yd-province-rt-v1)共用市场 CSV,但信息集不同:超短期允许 RT[≤t]。

  2. 2. 预测时点

    每个原点 t 预测 RT[t+2h]。15 分钟市场 lead=8 点,小时市场 lead=2 点。目标时段日前价已知。

  3. 3. 验证方式

    Holdout:2026-04-20 之前训练一次,再对 4 月 20 日–5 月 20 日逐日打分。不得用全样本回看。

  4. 4. 上榜资格

    须声明 province_ust slug、horizon、holdout 起止日,并同时报模型 MAE 与持久化 MAE。

源电评测协议 · Algri 现货实时 v1

Algri-Platform 省内现货实时价格。Walk-forward 评估。贴合度(准确率)= 100% − SMAPE;MAPE 仅作参考。

ID · yd-spot-rt-v1市场 · 山东 / 广东现货(Algri)v1.0.0

准确率 = 100% − SMAPE

近零/负电价时 MAPE 会爆炸,班组看 SMAPE 与曲线。

  1. 1. 市场范围

    Algri 山东/广东现货实时流水线。分情景(Regime)与 DA 纠偏分榜对照,不与湖北省间日前、也不与 VPPForecast 省内 holdout 混算。

  2. 2. 验证方式

    须 Walk-forward;random split 不得上榜。

  3. 3. 上榜资格

    声明 Algri pipeline / 实验 ID、数据源与模板。示意曲线不得冒充逐时真实出清。