解讀研究結果
讀研究結果時,先問「這份證據回答了哪個問題」,再看結論。以下是你的審查清單,不是系統替研究打分數的功能。
分清楚研究完成到哪裡
把資料匯入、把策略寫好、送出評估,以及評估完成,是不同的進度。完成前一步,不能當成下一步也成功。
| 你拿到的東西 | 可以確認什麼 |
|---|---|
| 工具設定或工具清單 | 設定存在;只有連線成功且工具載入,才代表連線可用。這仍不是一次評估。 |
| 提交回覆與操作編號 | 工作已送出,可以追蹤原操作;還要查它是否成功結束。 |
| 部分成功的結果 | 有一部分成果;要看哪一步失敗,不能把它當成全部完成。 |
| 成功結束的評估與產出檔案 | 可以審查這次歷史評估,不代表未來也會有同樣結果。 |
Edgewright 是研究引擎,不會下單。報告裡寫「可實盤」時,請追問它的依據,不要把歷史評估當成已經發生的實際交易。
認清每份結果用的材料
這裡的「身分」指的是:哪份資料、哪個策略、哪組設定產生了這份結果。
比較兩份結果前,請核對:
- 資料集的編號與商品。
- 策略的編號與版本。
- 評估期間、交易執行方式、資金與成本設定。
- 操作編號、評估編號與產出檔案。
例如,你原本只想比較交易成本,卻發現第二次換了資料集,就先請工具說清楚差異,別急著把收益變化歸因於成本。
在 Soulhall 中閱讀評估
從研究頁的引擎紀錄、報告或成果卡片打開一次評估。上面的每個數字都是引擎自己的量測,Soulhall 不會自行計算或補上數字。顯示破折號代表引擎認為這個數字在此次執行中沒有定義,例如沒有虧損交易時的獲利因子。
| 分頁 | 內容 |
|---|---|
| 概覽 | 淨利、最大回撤、交易次數與期末權益,權益曲線,以及標出每筆交易的價格圖。 |
| 績效明細 | 報酬(含年化成長率 CAGR)、風險(夏普、索提諾、卡瑪、回撤長度)、交易(勝率、獲利因子、平均每筆、持倉時間占比)與成本。下方是每日與每月報酬。 |
| 交易清單 | 每一筆完整來回的進場、出場、方向、持有時間、出場原因與損益。選一筆即可把圖表放大到那筆交易。 |
| 逐筆成交 | 引擎的每一筆成交,含部位變化、手續費與額外成本。 |
最下方的結果來源列出資料集與結果的指紋,讓兩次評估可以精確對應到產生它們的東西。策略回放會在交易終端上重播這次執行;見策略回放。
參數掃描與運氣
參數掃描會用同一個策略跑過一整組參數組合。Soulhall 把它畫成熱力圖:在著色指標選擇指標,並選擇要顯示的縱軸、橫軸與區段。每一格都是一次完整評估,點選即可打開。
試的組合越多,最好的那一格就越可能只是運氣。因此掃描會附上引擎對最佳格的判定,使用的是折減夏普(DSR):它會校正這類策略在此做過的所有嘗試。
| 判定 | 意思 |
|---|---|
| 通過 | 校正後,最佳格勝過運氣的把握在 95% 以上。 |
| 接近門檻 | 超過 90% 但未達 95%。值得做保留樣本測試,還不能算是優勢。 |
| 可能是運氣 | 在這麼多次嘗試下,這麼好的一格光靠運氣就常常出現。請先做樣本外測試。 |
| 無法判定 | 引擎目前無法計算這個數字,因此不做任何判斷。 |
如果掃描分成樣本內與樣本外兩段,Soulhall 會並列顯示引擎在樣本內選出的那一格,以及它在沒看過的資料上的表現。只在樣本內有效的格子,是被那段期間擬合出來的。
讀出風險與適用範圍
請要求研究者說明結果適用於哪些商品、哪些期間、哪些交易與成本假設。結論的範圍應該跟證據一致。
審查時可以問:「這個結論只在所用期間成立嗎?成本提高後還成立嗎?缺少哪份資料,會影響我現在的決定?」這些是你要追問的問題,不是每份評估都自動附上的檢查。
歷史評估不是預測,也不是投資建議。引擎完成計算,仍需要你判斷證據是否足以支持這次決定。
辨認過度擬合
過度擬合,可以想成「一直改策略,改到它剛好很會回答這份舊考卷」。舊資料的結果越漂亮,不一定越能回答新的問題。
閱讀時,請要求交代試過多少次、改過哪些條件,以及測試資料是否曾被拿來調整策略。不要只收最後最好的一次。
Soulhall 給化身的研究指引也要求交代搜尋量:經過大量試驗才挑出的數字,不能當成一次明確檢驗得到的同樣數字來報告。你可以先寫下可能被推翻的假設,再研究,避免看完結果才換問題。
讓每個結論都找得到依據
請把重要結論和評估編號、產出檔案對在一起。只有文字摘要時,要求補上原始評估與檔案,讀得到它們再下判斷。
引擎的評估詳細資料可帶出產出檔案的識別資訊,工具能依這些資訊讀回檔案。你可以要求:「指出支持這段結論的評估與檔案,說明裡面哪個結果支持它。」找不到依據的部分,就標成尚未查證。