样本外检验
也叫:样本外
一句话定义
用完全没有参与规则设计的数据来检验规则。
做法:把数据分成两段,只用第一段设计和调参,第二段一次性检验, 而且检验完不许回头改参数。
最后那句限制是关键:如果你看了样本外的结果不满意,回去调参再测一次, 那样本外就变成样本内了。这是实践中最常见的自欺方式。
更严格的做法是滚动前推检验(walk-forward): 用一段数据调参、在紧接着的一段上检验,然后窗口整体前移,重复多次。
这个词在哪一节细讲
相关术语