下载审查计数(CSV)English report2026年10月4日 · EasyQuant Research Team
LEARN · ZH · easyquanttrading.com
样本外越长越可靠吗?一次回测数据泄漏审查
更长的测试期,如果重复使用策略发现阶段见过的数据,就不是更强的独立证据。2026年10月4日,我们审查NZDUSD日线数据及两条LinearGP候选:旧终端历史测试有1001根K线,其中620根与训练或验证重叠;修正后的冻结样本外为110根,低于当前配置的1000根最低要求,因此证据保持待完成,部署认证被拦截。
- 审查范围:一个数据集 MT5_NZDUSD_D1、两条候选;不是全策略库的收益评测。
- 完整发现数据:730根K线,时间为2023年12月12日至2026年10月2日。
- 按时间切分:第0–509行训练(510根),510–619行验证(110根),620–729行最终样本外(110根)。
- 旧测试:1001根终端历史,其中620根与训练或验证数据重叠,620÷1001=61.94%。
- 冻结样本外:2026年5月4日至10月2日,按切分边界与训练、验证零重叠;不参与搜索评分或候选排名。
- 复现步骤:保留发现数据的时间戳;冻结切分位置;比较测试时间戳与训练、验证时间戳的交集;出现交集就需要撤回独立测试的说法。
- 修复版本 frozen_holdout_20261004_v1:缓存身份包含数据内容、信号和验证配置,避免不同切分复用旧证据。
- 限制:110根日线不是110笔独立交易,相邻K线可能相关;1000根是配置门槛,不代表统计充分性。
- 待完成、缺失或报错的必需证据拦截部署认证;研究候选可继续研究,但不表示已通过认证。
- 本案例验证了数据边界修复,不证明正期望收益、券商执行成功或未来实盘盈利,也不声称所有历史记录均已复验。
FAQ
- 增加样本外长度一定让回测更可信吗?
- 新增数据要独立于发现、选择和调参。把训练或验证历史重新算入测试,只增加数量,没有增加干净的独立证据。
- 为什么修复后仍然是待完成?
- 冻结样本外只有110根,低于当前配置的1000根要求。补入过去见过的行情不解决独立性,因此保持待完成而不是标为通过。
- 这个报告的数据可以下载吗?
- 页面提供CSV聚合计数快照,英文报告说明计算口径和限制。快照不是原始行情,未包含策略表达式或交易收益。
← 返回量化学习不承诺收益,只承诺可检验。