样本外测试是什么?回测过关后还有一关
发布时间:5小时前阅读:8
回测曲线很漂亮,就敢信了吗?中间还隔着一关,叫样本外测试,这一关过滤掉的是策略开发里最隐蔽的陷阱。
先讲清陷阱是什么。策略开发是个反复调整的过程:跑一遍回测,结果不好,改参数;再不好,改规则;几十轮下来,回测曲线越来越顺滑。但每一次调整,都在悄悄吸收历史数据里的偶然性——你调的不是策略逻辑,而是在对过去这段数据做记忆训练。参数越调越多、规则越改越细,曲线越漂亮,其中真实的规律占比越低,运气拟合的成分越高。
样本外测试就是给这套流程做的验收。做法很朴素:把手头历史数据切成两段,开发阶段只用前一段,后一段封存;策略全部定型之后,一次性的、不做任何后续调整地,在后一段数据上跑一遍。因为后一段数据从未参与过任何设计决策,它上面的成绩近似于策略面对未知市场的表现。
执行时有几条纪律。
1、样本外只跑一次。跑完不满意,回去改参数再跑样本外,样本外就变成了开发集,测试意义归零。正确做法是改完后隔一段时间、换了思路再验证。
2、样本外成绩必然低于回测,落差在两三成以内都属正常,要警惕的是断崖式落差,那说明前面全是过拟合。
3、样本区间要足够长,太短的样本外同样没有说服力。
一句话记住它:回测成绩是策略对已知数据的解释能力,样本外成绩才是对未知数据的预测能力。你要的显然是后者,验收就看后者。
样本外数据的切分方式也有讲究:不要随机抽取,按时间顺序切,前面开发、后面验证,因为实盘面对的就是时间上未知的新数据,按时间切才和真实场景一致。随机切分的样本外会泄露时间重叠信息,成绩虚高,这个坑做统计的人常提,做交易的人容易忘。
股票/量化开户欢迎找我!满足条件股票佣金万0.854、etf 可转债佣金万0.5、国债逆回购一折(百万分之一)!期权1.8元一张全包价!量化软件QMT+ptrade免费使用!还有888、999资金靓号等你选!
温馨提示:投资有风险,选择需谨慎。



问一问
从业认证

+微信
分享该文章
