回测跑得快不代表能用,先看样本外那一段
发布时间:24分钟前阅读:13
调参数调到回测曲线漂亮,是每个量化新手都会经历的兴奋时刻。然后带着这份兴奋上实盘,被真实市场上一顿教育。问题不在回测本身,在于检验方法少了一步:样本外验证。
先解释这个问题怎么发生的。回测用的是历史数据,你在同一段历史上反复调整参数,每改一次看一次结果,最后选出的那组参数,是这个历史片段里表现最好的。这个过程本质上是在对历史数据「应试」,参数记住了这段行情的脾气。将来行情换了脾气,应试的优等生立刻不及格。参数调得越细、次数越多,这种记忆效应越严重,曲线越漂亮,越要警惕。
样本外验证是对症的药:把历史数据切成两段,前一段用来开发策略、调参数,后一段封存不动,策略定型后只在后一段跑一次,看成绩。由于参数从没见过后一段数据,这段的成绩更接近真实水平。讲究一点的做法再加一层:滚动验证,按时间分段轮换开发和检验区间,多看几个样本外的成绩。
样本外成绩怎么看。和样本内的差距是关键指标:差距不大,说明策略捕捉的是稳定规律;断崖式下滑,说明样本内的大半收益是记忆效应。另外样本外的那段行情最好和样本内风格不同——一段牛市里开发的策略,必须接受熊市段的检验,否则验证等于没做。
样本外验证做完还有一关:实盘偏差跟踪。策略上线后,把实盘每笔成交和回测同场景的假设成交做对比,价差、成交率、时延三项按周汇总。这个跟踪做上两个月,你手里就有自己的实盘偏差系数,以后评估任何回测结果,都主动打上这个折扣。知道自己数据的折扣,是回测用户和回测使用者的区别。
把样本外验证变成固定流程,还有一个附带的好处:它天然抑制过度调参,因为调得太狠,样本外会诚实打脸。流程约束行为,行为保护资金,这是回测方法学里性价比最高的一环。
股票/量化开户欢迎找我!满足条件股票佣金万0.854、etf 可转债佣金万0.5、国债逆回购一折(百万分之一)!期权1.8元一张全包价!量化软件QMT+ptrade免费使用!还有888、999资金靓号等你选!
温馨提示:投资有风险,选择需谨慎。



问一问
从业认证

+微信
分享该文章
