Contents Research Promotion Gate

FX Autonomous Research

Research Promotion Gate

Research Promotion Gateは、研究候補が次段階へ進むための証拠と条件を定義する独立審査層である。バックテストが良いという理由だけで実口座へ昇格させず、データ品質、統計的汎化、コスト、尾部リスク、運用安全性を段階的に確認する。仮説を提案したLLM、コードworker、Optuna studyとは独立したルールエンジンが合否を計算する。

Promotion State Machine

状態 意味 次へ進む条件
DRAFT 仮説草案 機構・対象・反証条件
SPECIFIED 仕様固定 データ・期間・baseline・棄却基準
DATA_READY データ準備 schema・UTC・Bid/Ask・hash検査
IMPLEMENTED 実装完了 unit・integration・leakage tests
SCREENED 一次評価 baseline比較
VALIDATED 統計検証 WFA・Purged CV・選択バイアス評価
STRESS_TESTED ストレス評価 コスト・レジーム・損失経路
SHADOW ライブ観測 発注せず予測・遅延を記録
PAPER デモ取引 約定照合・停止系を検証
APPROVED 承認済み候補 独立審査と運用承認
REJECTED / ARCHIVED 棄却・保管 理由と再検討条件

不合格時は該当段階へ戻す。変更候補は元runを上書きせず、新しいexperiment_idを発行する。

統計ゲート

最終holdoutを選択に使っていないこと、WFA複数期間で再現すること、特徴量とラベルに先読みがないこと、trial数と不採用候補を記録していること、コスト控除後の純期待値・PF・Sharpe・勝率・MDD・取引数・foldばらつきを報告することを確認する。指標定義・年率化・費用の扱いも固定する。

PF 1.8以上・勝率60%以上は研究目標として設定できるが万能基準ではない。勝率が60%でも平均損失が平均利益の2倍なら、コスト前の期待値が負になる場合がある。純期待値、サンプル数、期間安定性、MDD、尾部リスクと組み合わせて判断する。

経済・執行ゲート

実際のBid/Ask、手数料、slippage、swap、約定拒否、レイテンシ、gapを反映する。Shadowではライブデータで予測だけを記録し、Paperではデモ口座でorder・deal・position照合とkill switchを試す。ストレス時に利益が消える候補は適用範囲を限定するか棄却する。

安全と権限

LLM・学習モデル・Optuna trialに本番注文権限やRisk Gate変更権限を与えない。Risk Gateは別コード経路に置き、最大lot、同時建玉、日次損失、総DD、spread、接続、データ鮮度を検査する。承認済みmodel version、config version、symbol、timeframe、口座環境の組み合わせだけを許可し、昇格・変更・rollbackを監査記録する。

具体例:XAUUSDの目標達成候補

XAUUSD M5がPF 1.9・勝率61%でも即APPROVEDにはしない。取引数、純利益、cost差、WFA各fold、独立holdout、PBO、Monte Carlo、spread拡大、slippage悪化を確認する。利益が一つのfoldに集中すれば止め、Shadowでデータ鮮度、Paperで約定と停止系を確認する。最後の承認は研究エージェントから独立した運用責任者が行う。

References

Quizzes
  1. PF 1.9・勝率61%を出したXAUUSD候補にPromotion Gateが追加で求めるべき証拠はどれか?

    • 取引数・純期待値・WFA・独立holdout・コスト感応度・尾部リスク
    • PFと勝率だけで十分として即本番へ進める
    • 学習lossとGPU使用率だけで統計検証を代替する
    • 最高fold以外を除いて全期間成績を報告する

    PFと勝率だけでは利益集中・サンプル数・コスト・ドローダウン・将来汎化を説明できない。

  2. ShadowからPaperへ進める前に確認すべきことはどれか?

    • デモ環境で注文・約定・position照合・拒否・停止系が動作すること
    • Shadowで予測が出たため実口座権限を直ちに付与すること
    • デモ取引ではログや約定履歴を保存しないこと
    • モデル自身がkill switchを解除できること

    Shadowは注文しない観測段階であり、Paperはデモ環境で実行・照合・停止動作を検証する段階である。

  3. 研究AI自身に昇格基準を自由変更させない理由はどれか?

    • 候補生成者が審査条件も緩和し、自己承認することを防ぐため
    • LLMが統計指標を読むことができないため
    • 独立ゲートではWFAを実行できないため
    • 固定基準なら全戦略が利益を出すため

    提案・実装と採否判定を分離し、候補を作った主体が自ら審査条件を変えられないようにする。

Comments

No comments yet. Start the conversation.