过拟合是什么?用一个比喻把它讲透
发布时间:1小时前阅读:20
做量化的人早晚都会撞上一个词:过拟合。定义看了八遍还是模糊,因为它描述的是一种统计现象,没踩过坑的人很难有体感。今天用一个生活化的比喻,把它彻底讲透,顺便告诉你怎么在自己身上发现它。
想象你在复习备考。正常的复习方式是理解知识、掌握方法,考试遇到新题目也能答。但还有一种取巧的复习:把往年考卷的每道题答案死记硬背,连题目里的标点都背下来。模拟考用原题时你次次满分,一进考场遇到新题就崩溃。过拟合就是这种死记硬背——你的策略不是学会了市场的规律,而是背下了历史数据里的噪音。
对应到量化里是什么样?你发现某个均线参数组合在过去五年表现绝佳,于是精心调参,把参数从五日调到七日,回测又好了一点;再加个条件,又好一点。每一步历史表现都在提升,最后得到的策略对历史数据近乎完美,但对未来毫无预测力,因为它记住的是那五年里偶然的价格轨迹,而不是有效的交易逻辑。
怎么在自己身上发现过拟合?三个自查问题。第一,你的参数是不是调了很多轮?调的轮次越多,背题嫌疑越大,历史上恰好有效的参数范围通常很窄。第二,策略换个时间段还灵吗?把回测分成前后两段,前段发现、后段验证,后段崩了就是背题实锤。第三,策略有没有经济学解释?说不出它赚的是谁的钱、市场为什么会持续提供这个机会,那这个规律大概率是噪音凑巧排成的图案。
防过拟合的纪律也很朴素:参数少调,两三轮为限;规则简单,一个策略里的自由变量越少越安全;样本外验证是铁律,任何没在新数据上检验过的策略都当作未验证;还有一条容易被忽略的,同一个人在同一批数据上试的策略越多,撞上虚假规律的概率越高,所以要控制尝试次数、记录每一次尝试。
一句话总结这个比喻:复习要理解,不要背题。市场是新考场,题目永远在变,只有真正理解规律的策略才能考出持续的分数。每次回测出漂亮结果时,先问自己一句:我是懂了,还是背下来了?这一问,能救你很多次。
温馨提示:投资有风险,选择需谨慎。



问一问
从业认证

+微信
分享该文章
