Sharpe trong backtest có thể tăng khi bạn thêm nhiều thị trường

Thêm nhiều thị trường vào quá trình tìm kiếm chiến lược có thể khiến kết quả backtest tốt nhất trông mạnh hơn, đồng thời khiến bằng chứng yếu đi. Sharpe cao hơn sau khi thêm các mã thường được xem là đa dạng hóa; nhưng nếu bạn đã tìm người chiến thắng trong số các mã đó, bạn cũng tăng số cơ hội gặp may.

Sự khác biệt này quan trọng dù một agent đề xuất hàng trăm tín hiệu hay một nhà nghiên cứu tự kiểm tra vài tín hiệu. Không gian tìm kiếm bao gồm mọi tổ hợp thị trường, khung thời gian, đặc trưng và tham số có kết quả ảnh hưởng đến lựa chọn cuối cùng. “Chúng tôi chỉ triển khai một chiến lược” không cho biết có bao nhiêu ứng viên đã được thử sức.

Vì sao tập thị trường lớn hơn có thể đẩy Sharpe tốt nhất lên cao?

Hãy tưởng tượng kiểm tra cùng một mẫu chiến lược trên 40 thị trường không liên quan. Để đơn giản, giả sử Sharpe thực của mọi thị trường đều bằng 0 và mỗi Sharpe ước tính có sai số chuẩn là 0.5. Các ước tính dao động quanh 0. Tuy nhiên, hãy chọn giá trị cao nhất, và thông thường giá trị đó sẽ dương chỉ vì bạn đã chọn mức tối đa.

Theo xấp xỉ chuẩn sơ bộ, giá trị lớn nhất trong 40 ước tính nhiễu độc lập được kỳ vọng nằm cao hơn 0 khoảng 1.3 sai số chuẩn: tức khoảng 0.65 Sharpe trong ví dụ này. Con số chính xác phụ thuộc vào mức độ phụ thuộc, độ dài mẫu và phân phối lợi nhuận. Mấu chốt là việc lựa chọn tạo ra sự lạc quan ngay cả khi không chiến lược nào có lợi thế.

Các thị trường không phải những lần tung đồng xu độc lập. BTC và ETH thường biến động cùng nhau; hai chỉ số chứng khoán có thể chia sẻ phần lớn rủi ro. Điều đó làm giảm số lần thử độc lập hiệu dụng, nhưng không khiến vấn đề biến mất. Và các thị trường tương quan vẫn có thể khác nhau về phí, funding, thanh khoản và những khung giờ tín hiệu phát huy tác dụng.

Kiểm tra nhiều thị trường hơn có được tính là kiểm định nhiều lần không?

Có, khi bạn dùng kết quả để quyết định giữ lại điều gì. Nếu giả thuyết ban đầu là “quy tắc này nắm bắt hiệu ứng funding trên các hợp đồng perpetual lớn”, thì xem xét nhiều thị trường là một phần của việc kiểm định giả thuyết đó. Nếu bạn kiểm tra 50 thị trường, tìm ra thị trường tốt nhất rồi viết giả thuyết dựa trên diễn biến của nó, việc lựa chọn tập thị trường đã trở thành một phần của quá trình tối ưu hóa.

Có một khác biệt hữu ích giữa việc chọn độ rộng từ trước và chọn sau khi xem kết quả. Một rổ cố định có thể cho thấy ý tưởng có vững vàng trên một phạm vi đã nêu hay không. Một rổ được mở rộng cho đến khi có một mã tạo ra đường vốn ấn tượng là một quy trình tìm kiếm. Cả hai đều có thể là nghiên cứu hợp lệ, nhưng chúng trả lời những câu hỏi khác nhau.

Làm thế nào để kiểm tra xem lợi thế có áp dụng được sang thị trường mới không?

Cố định các lựa chọn nghiên cứu trước khi mở tập kiểm tra giữ lại. Tức là cố định định nghĩa tín hiệu, tham số, quy tắc chọn tập thị trường, lịch tái cân bằng và giả định thực thi. Sau đó đánh giá chiến lược không thay đổi trên các thị trường chưa ảnh hưởng đến những lựa chọn đó.

Ví dụ, giả sử một quy tắc động lượng crypto được phát triển trên các hợp đồng perpetual BTC và ETH đến hết năm 2023. Bạn có thể dành riêng một nhóm hợp đồng perpetual thanh khoản khác, được chọn theo quy tắc chỉ sử dụng thông tin có sẵn trước giai đoạn kiểm tra, và không đưa nhóm đó vào bất kỳ lần tinh chỉnh nào. Áp dụng quy tắc đã cố định cho các hợp đồng đó trong năm 2024 và 2025. Tính đến cấp phí thực tế của từng sàn, các khoản funding, thông số hợp đồng và giả định tác động giá có cơ sở; phép thử chuyển giao không tính chi phí giao dịch đặc thù theo thị trường có thể nhầm khác biệt chi phí thành việc tín hiệu thất bại — hoặc che giấu một thất bại như vậy.

Báo cáo phân phối kết quả trên các thị trường giữ lại, không chỉ Sharpe gộp. Một danh mục gộp có thể che giấu việc gần như toàn bộ lợi nhuận đến từ một thị trường. Hãy trình bày kết quả ròng, số giao dịch, mức sụt giảm và tỷ trọng P&L tổng do thị trường lớn nhất đóng góp cho từng thị trường. Nếu quy tắc chỉ hiệu quả trên một hợp đồng, hãy gọi đó là kết quả đặc thù cho hợp đồng đó.

Cũng cần phân chia thời gian một cách chặt chẽ. Một thị trường có thể chưa được đụng tới nhưng giai đoạn dữ liệu của nó vẫn trùng với cùng chế độ thị trường đã thúc đẩy kết quả phát triển. Tập kiểm tra giữ lại theo thị trường đặt câu hỏi liệu quy tắc có áp dụng được giữa các công cụ hay không; tập kiểm tra ở giai đoạn sau đặt câu hỏi liệu quy tắc có áp dụng được theo thời gian hay không. Đây là hai phép thử riêng biệt, và kết quả tốt ở phép thử này không thay thế được phép thử kia.

Nếu chiến lược thực sự cần dùng nhiều thị trường thì sao?

Vậy hãy đưa chúng vào, nhưng xác định cách thức. Một quy tắc danh mục giao dịch trên mọi thị trường đủ điều kiện theo một tín hiệu cố định khác với cuộc đua mà thị trường có kết quả lịch sử tốt nhất sẽ thắng. Tiêu chí đủ điều kiện cần được xác định mà không nhìn vào kết quả tương lai: chẳng hạn, dựa trên ngưỡng thanh khoản tại thời điểm đó và yêu cầu lịch sử tối thiểu. Thay đổi thành viên cũng cần có dấu thời gian; nếu không, danh sách “thị trường thanh khoản” hiện tại có thể đưa những thị trường còn tồn tại hôm nay vào backtest lịch sử.

Những người chỉ trích có lý khi nói rằng tập thị trường hẹp có thể tạo ra chiến lược mong manh và kiểm tra rộng là một cách hữu ích để đánh giá độ vững. Giải pháp không phải là tránh kiểm tra thị trường. Mà là tách riêng các thị trường dùng để khám phá ý tưởng khỏi các thị trường dùng để thử thách ý tưởng đã cố định, đồng thời tính cả công việc khám phá vào bằng chứng.

Một tập thị trường lớn hơn có thể giúp chiến lược đứng vững bên ngoài môi trường phòng thí nghiệm. Nó cũng có thể giúp một backtest gặp may thắng cuộc tuyển chọn của phòng thí nghiệm. Nhật ký tìm kiếm và tập kiểm tra giữ lại sẽ cho bạn biết Sharpe của mình ủng hộ câu chuyện nào.