回測最漂亮的引數,可能只是最會解釋過去

回測挑出的最優引數,只說明它很會解釋已經看過的資料。小白理解:留一段沒參與調參的資料,再用附近引數複測,結果還能站住才值得繼續看。
2它在說什麼
場景:小林拿四年的歷史資料測試均線突破,把 10、15、20、25、30 根都跑一遍。20 根的曲線最順,樣本內回撤只有 8%,小林立刻把它定成正式引數。後來把最後一年單獨拿出來,回撤變成 18%,小林才發現自己早就看過全部資料。
引數越多,越容易從噪音裡挑出一條好看的線。它可以把過去的每個拐點解釋得很漂亮,卻未必能面對下一段行情。回測的關鍵不在於找到最閃亮的數字,而在於把沒看過的資料留到最後。
測試時還要看附近引數。如果 20 根有效,19 根和 21 根也應至少保留基本形狀;只有一個尖峰,通常說明模型對歷史細節太敏感。
3為什麼成立
小林把前 3 年標成樣本內,最後 1 年封存為樣本外。調參只能看前 3 年,引數鎖定後才開啟最後 1 年。樣本外回撤 18% 並不自動判定方法失效,卻提醒小林,樣本內的 8% 不能直接當作未來承諾。
封存區要像真正的考試卷,不能看一題改一題。若樣本外結果不好,應該記錄為一次檢驗,再回到研究區提出新假設,不能把最後一年重新塞回撥參區直到曲線變好。
穩健性可以從三個角度看:引數附近的表現、市場狀態的分組、成本和滑價的壓力測試。每項都只回答一個問題,別為了得分好看再不斷加篩選條件。
小林還把 20 根附近的 19 根、21 根各跑一次,觀察曲線是否仍有相近的回撤和交易節奏。若只有 20 根出現低谷,附近引數一換就失去形狀,這個低谷更像歷史巧合。
先看沒見過的資料
測試區別偷看回測記錄要寫清資料截止日、引數候選、剔除理由、費用口徑和樣本外開封時間。沒有這些欄位,下一次復盤很容易把已經看過的資料假裝成新證據。
講系統測試的書裡常提穩健性,可以轉成自己的檢查動作:先留出測試區,再鎖引數,最後才看結果。書裡的方法是提醒,真正的證據仍要來自你自己的資料和執行記錄。
4落成一條規則
把資料分割槽寫在回測表最上方,開跑前就鎖住:
5什麼時候不靈
- 樣本外只有很少交易時,結論會很抖,先把它當風險提示,不要急著宣佈成功或失敗。
- 市場制度、流動性和成本改變後,舊測試不能覆蓋新環境,必要時要重新定義分割槽和成交假設。
- 引數附近都不好看,可能是模型本身沒有邊際優勢,也可能是規則描述不完整,需回到可復現條件重新檢查。
6對應技能和課節
想把這條練成習慣,按下面的技能和課節學。點技能名回學習地圖看它的前後位置。
- 量化入門:資料、回測與過擬合
自己寫出一個從訊號到淨值曲線的回測,分開樣本內外,知道過擬合長什麼樣。
- 樣本外與走步驗證
把調參和最終檢驗用的資料分開,不反覆偷看檢驗集。
- 回測一個規則
把一個模型寫成可復現的規則,用歷史資料手工回測,算進費用、滑價和成交不了的情況。
30 秒自測
小林發現樣本內回撤 8%,樣本外回撤 18%,下一步最合適的動作是什麼?
看答案與解析
答案:C。樣本外結果先作為檢驗記錄,附近引數和成本檢查能幫助判斷是否過度貼合曆史。A、B 會汙染測試區,D 把不確定性放大。
同一主題的其他篇
- 08少做,只做看得懂的
- 09一套打法做到熟
- 10按過程打分,不按單筆盈虧
- 17勝率派還是盈虧比派
- 18盤感還是機械系統
- 19短線還是長線
- 30讀完一本交易書,下一筆到底改哪個動作
- 40海龜:規則要覆蓋整筆交易
- 43塞柯塔:系統若不合生活,遲早會被你改壞
- 45拉施克:短線能重複,才有資格談優勢
- 47巴菲特:看不懂的機會,可以讓它過去
- 52學了很多招,為什麼一筆交易還是說不清楚
- 55記錄一百張圖,不如把同一種錯誤查清楚
- 60五分鐘內結束的交易,賺的不是手快,是虧得小
- 76模擬盤賺錢,換到實盤為什麼就手抖
- 82做了三年還沒穩定,要不要繼續
- 83復盤表裡沒有手續費,利潤只是幻覺
- 88AI 能幫你整理復盤,不能替你承擔虧損
- 91盯盤八小時,不會多出一個好訊號
- 100只看最近一週,永遠會覺得自己找到規律
- 104“這次不一樣”要靠記錄,不靠語氣
- 105復盤時給虧損找好聽的理由,等於白復盤
- 106交易紀錄少記觀點,多記當時能驗證的事實
- 107系統連虧,多半該查的是你有沒有照做
- 108系統要有版本號,改一條就留一條記錄
- 110上班族不用盯盤,也能把交易做成流程
- 115交易員的休息日,也屬於交易系統
- 116全職以後反而做得更頻繁,說明壓力變大了
- 122刷推越多,越容易把別人的緊急變成自己的訂單
- 136加密永續全天開盤,人的作息不會全天線上
- 143自動交易上線,從最小部位跑起
- 148達利歐:每犯一次錯,就多寫一條原則
- 151羅傑斯:等錢躺在牆角,再走過去撿
- 153斯蒂恩巴格:復盤也要找你做對的那幾筆
- 157帳戶漲跌,不該決定你今天是個什麼人
- 158交易第一年,最該攢的是樣本
- 159沒人能替你按那個按鈕
- 160找個交易搭子,互相盯規則別盯方向
- 163牛市裡人人是高手,熊市才看得出誰有規則
- 164指標都是慢半拍的,那還要不要看