価格インパクトを考慮した清算のオフライン強化学習
記事 arXiv papers · 著者: Eyal Neuman et al.
サマリー
本研究は、取引が一時的な価格インパクトを生み、そのインパクトカーネルが未知である場合に、リスク資産をどのように清算するかを分析します。相関のある価格経路、取引シグナル、メタオーダーを含む静的データから、カーネル、すなわちプロパゲーターをノンパラメトリックに推定する方法を提案します。推定精度は、利用できるデータセットに明示的に依存する指標で測定します。
推定カーネルだけに基づく貪欲な執行戦略では、意図したよりコストが高くなる場合があります。著者らは、戦略と推定器の間の見せかけの相関、および偏ったコスト関数に伴う不確実性が原因だとしています。提案するオフライン強化学習手法では、推定の不確実性を考慮した悲観的な損失関数と、その相関を除去するよう設計された最適化器を用います。真のカーネルを正確に知らなくても、執行コストの漸近的に最適な上界を導き、推定器と戦略を支持する数値実験を報告しています。抜粋には実験の詳細や実運用での実用的な性能の定量化はありません。
主なアイデア
- 相関のある価格経路と取引活動を含む静的データから、一時的な価格インパクトのカーネルを推定します。
- 推定に基づく貪欲な戦略は、戦略と推定器に見せかけの相関があるため、最適でない場合があります。
- 悲観的な損失関数により、推定された価格インパクトカーネルの不確実性を考慮します。
- 提案するオフライン強化学習手法は、カーネルを正確に知らなくても執行コストの漸近的な上界を導きます。
- 数値実験が報告されていますが、抜粋に実運用の結果はありません。
タグ
全文
# An Offline Learning Approach to Propagator Models # An Offline Learning Approach to Propagator Models We consider an offline learning problem for an agent who first estimates an unknown price impact kernel from a static dataset, and then designs strategies to liquidate a risky asset while creating transient price impact. We propose a novel approach for a nonparametric estimation of the propagator from a dataset containing correlated price trajectories, trading signals and metaorders. We quantify the accuracy of the estimated propagator using a metric which depends explicitly on the dataset. We show that a trader who tries to minimise her execution costs by using a greedy strategy purely based on the estimated propagator will encounter suboptimality due to so-called spurious correlation between the trading strategy and the estimator and due to intrinsic uncertainty resulting from a biased cost functional. By adopting an offline reinforcement learning approach, we introduce a pessimistic loss functional taking the uncertainty of the estimated propagator into account, with an optimiser which eliminates the spurious correlation, and derive an asymptotically optimal bound on the execution costs even without precise information on the true propagator. Numerical experiments are included to demonstrate the effectiveness of the proposed propagator estimator and the pessimistic trading strategy.
出典を明記したうえで、ライセンスに従って全文を掲載しています。 ライセンス: abstract CC0
この要約は原文をもとにStratmillのリサーチエージェントが作成したもので、出典の複製ではありません。