Chuyển đến nội dung
← Tất cả bài viết

EA giao dịch bằng AI

EA overfitting là gì: vì sao backtest hoàn hảo vẫn có thể thất bại khi chạy thật

EABuild Team · · 13 phút đọc

EA Overfitting Explained: Why a Perfect Backtest Can Fail Live – EABuild

EA overfitting (quá khớp) xảy ra khi thiết lập của một Expert Advisor được tinh chỉnh quá sát với một đoạn giá trong quá khứ, đến mức EA chỉ mô tả lại đoạn lịch sử đó thay vì phản ánh một hành vi thị trường có thể lặp lại. Kết quả backtest trông mượt vì các thiết lập được chọn để nó trông mượt. Bài viết này giải thích overfitting hình thành như thế nào, cách nhận ra nó trong báo cáo Strategy Tester và những bài kiểm tra đơn giản giúp bạn giảm nguy cơ tin vào nó.

EA overfitting nghĩa là gì, nói đơn giản

Mỗi EA đều có các tham số đầu vào: chu kỳ, khoảng cách, khối lượng lot, bộ lọc thời gian. Thay đổi một tham số thì kết quả backtest thay đổi theo. Nếu bạn thử đủ nhiều tổ hợp trên cùng một đoạn lịch sử giá, sẽ có một tổ hợp khớp với đoạn lịch sử đó rất tốt, một phần nhờ hành vi thực của thị trường và một phần do ngẫu nhiên thuần túy. Overfitting, còn gọi là curve fitting (khớp đường cong), là việc chọn đúng tổ hợp khớp với phần nhiễu.

Có thể hình dung như một học sinh học thuộc đáp án của đề thi năm ngoái. Điểm của đề đó rất cao, nhưng học sinh chưa hiểu môn học, nên gặp đề mới với câu hỏi khác thì làm bài rất tệ. Một EA bị overfitting đã học thuộc một đoạn lịch sử cụ thể. Giao dịch thật chính là đề thi mới.

Vì sao rất dễ mắc phải do vô tình

Không cần có ý xấu thì chuyện này vẫn xảy ra. Strategy Tester trong MetaTrader cho phép bạn chạy tối ưu hóa (một loạt lượt kiểm tra thay đổi các tham số đầu vào) rồi sắp xếp kết quả theo lợi nhuận. Dòng đầu bảng rất hấp dẫn. Nhưng dòng đầu bảng chỉ đơn giản là lượt chạy tình cờ phù hợp nhất với mẫu dữ liệu đó.

  • Bạn tối ưu càng nhiều tham số thì càng có nhiều tổ hợp, và càng dễ tìm được một tổ hợp khớp chỉ nhờ may mắn.
  • Lịch sử càng ngắn thì EA càng ít phải đối mặt với các điều kiện thị trường khác nhau.
  • EA càng có nhiều quy tắc thì càng có nhiều chỗ để uốn theo từng sự kiện riêng lẻ trong quá khứ.

Một EA đã tối ưu hóa bị khớp với giá cũ như thế nào

Hãy xét một EA breakout đơn giản có năm tham số đầu vào. Bạn kiểm tra nó trên một năm dữ liệu M15 và chạy tối ưu hóa. Một lượt chạy cho thấy mức cắt lỗ có đúng một kích thước, độ dài vùng giá có đúng một giá trị và một bộ lọc phiên tình cờ bỏ qua ba tuần xấu. Đường equity trông ổn định.

Không giá trị chính xác nào trong số đó nhất thiết có ý nghĩa. Mức cắt lỗ lớn hơn hoặc nhỏ hơn một chút có thể cho ra đường cong tệ hơn nhiều. Độ nhạy đó là dấu hiệu then chốt: kết quả tốt nằm trên một đỉnh nhọn hẹp, chứ không nằm trên một vùng bằng phẳng rộng, nơi các giá trị lân cận cũng cho kết quả tương đối tốt.

Bộ lọc loại bỏ các khoản lỗ trong quá khứ

Bộ lọc thời gian và bộ lọc tin tức có thể hợp lý, nhưng chúng cũng có thể bị dùng để cắt đúng những ngày làm hỏng kết quả backtest. Một quy tắc chỉ đơn giản bỏ qua vài tuần được gọi tên rất khó biện minh bằng lý do thị trường. Một quy tắc tránh vài phút đầu quanh các thời điểm công bố dữ liệu theo lịch thì có thể giải thích được, kiểm tra được trên các giai đoạn khác và vẫn hợp lý trên dữ liệu mà EA chưa từng thấy.

Chi phí mà bài kiểm tra bỏ sót

Một backtest cũng có thể trông tốt hơn thực tế vì spread, hoa hồng hoặc trượt giá được mô phỏng nhẹ hơn mức sàn của bạn thu. Đây không phải overfitting theo nghĩa chặt chẽ, nhưng nó có tác động tương tự: kết quả kiểm tra mô tả một thị trường không tồn tại với tài khoản của bạn. Các hướng dẫn về backtest EA trên MT5 và backtest EA trên MT4 trình bày cách thiết lập trình kiểm tra để chi phí được mô phỏng sát nhất mà nền tảng cho phép.

Dấu hiệu cảnh báo EA bị overfitting trong báo cáo backtest

Bạn không thể chứng minh overfitting chỉ từ một báo cáo, nhưng nếu nhiều dấu hiệu xuất hiện cùng lúc thì bạn nên thận trọng.

  • Đường cong rất mượt với rất ít giai đoạn thua lỗ. Thị trường thật luôn đổi tính chất. Một đường cong không có điểm chịu áp lực nào rõ rệt trong một bài kiểm tra dài có thể đã được chọn lọc chứ không phải tự đạt được.
  • Kết quả sụp đổ khi bạn nhích nhẹ một tham số. Hãy đổi một chu kỳ theo một bước nhỏ. Nếu báo cáo thay đổi hoàn toàn thì thiết lập đang nằm trên một đỉnh nhọn.
  • Nhiều tham số có giá trị chính xác và khác thường. Những giá trị như mức cắt lỗ có một kích thước rất cụ thể mà không nêu lý do cho thấy các con số có thể đến từ một lượt chạy tối ưu hóa.
  • Kết quả tốt chỉ trên một mã giao dịch và một khung thời gian. Một số EA được thiết kế cho một mã giao dịch trên một khung thời gian, và điều đó không sao. Nhưng nếu logic tuyên bố một ý tưởng tổng quát mà chỉ một cặp mã giao dịch - khung thời gian hoạt động được, hãy tự hỏi vì sao.
  • Giai đoạn kiểm tra ngắn hoặc chỉ gồm một loại thị trường. Một EA theo xu hướng mà chỉ được kiểm tra trong một xu hướng mạnh thì chưa gặp những điều kiện khó của nó.
  • Ít lệnh. Một vài lệnh có thể trông ấn tượng nhưng vẫn nói rất ít.

In-sample, out-of-sample và walk-forward testing

Cách phòng vệ tiêu chuẩn trước overfitting là giữ lại một phần dữ liệu, không cho quá trình tối ưu hóa nhìn thấy. Các thuật ngữ dưới đây mô tả cách làm.

Dữ liệu in-sample và out-of-sample

Giai đoạn in-sample là đoạn lịch sử bạn dùng để chọn thiết lập. Giai đoạn out-of-sample là một đoạn sau đó mà bạn không đụng đến trong lúc chọn. Bạn chọn thiết lập trên phần đầu, rồi chạy EA đúng một lần trên phần thứ hai với các thiết lập giữ nguyên. Nếu hành vi out-of-sample giống hành vi in-sample về tính chất, ví dụ tần suất lệnh tương tự và các kiểu drawdown (mức sụt giảm từ số dư đỉnh của tài khoản) tương tự, thì khả năng sự khớp đó chỉ là tình cờ sẽ thấp hơn. Nếu nó trông như một EA khác, hãy nghi ngờ kết quả in-sample.

Hai quy tắc giúp cách này hữu ích. Thứ nhất, giai đoạn out-of-sample phải nằm sau giai đoạn in-sample, vì EA sẽ giao dịch tiến về phía trước theo thời gian. Thứ hai, bạn chỉ được nhìn một lần. Nếu bạn xem kết quả out-of-sample, đổi thiết lập rồi xem lại, phần dữ liệu đó đã trở thành in-sample và bạn đã mất lớp bảo vệ.

Walk-forward testing

Walk-forward testing lặp lại ý tưởng đó theo từng bước. Bạn tối ưu hóa trên một cửa sổ lịch sử, kiểm tra trên cửa sổ ngay sau đó, rồi trượt cả hai cửa sổ về phía trước và lặp lại. Kết quả là một chuỗi các đoạn out-of-sample, mỗi đoạn được kiểm tra với thiết lập chỉ chọn từ dữ liệu trước đó. Nó cho bạn biết liệu quy trình tối ưu hóa một EA có thường tạo ra các thiết lập tiếp tục hoạt động hay không, chứ không chỉ là một bộ giá trị nào đó có hoạt động hay không.

MetaTrader 5 có tùy chọn forward testing trong Strategy Tester, giữ lại một phần của giai đoạn sau khi tối ưu hóa. Quy trình walk-forward đầy đủ qua nhiều cửa sổ thường cần thêm script hoặc công cụ bên ngoài, nên nhiều nhà giao dịch làm một phiên bản đơn giản bằng tay: tối ưu hóa, kiểm tra trên khối kế tiếp, chuyển sang khối sau, rồi so sánh các khối.

Các cách kiểm tra chéo khác

  • Chạy cùng EA đó trên một mã giao dịch gần giống hoặc một khung thời gian khác mà ý tưởng cũng nên áp dụng, rồi xem hành vi có tương tự về đại thể hay không.
  • Kiểm tra với spread cao hơn và một chút trượt giá để xem lợi thế mong manh đến mức nào.
  • Kiểm tra trên một giai đoạn có chế độ thị trường khác, chẳng hạn một vùng đi ngang yên ắng theo sau là một nhịp tăng giảm mạnh.

EA overfitting ở các EA gắn nhãn AI và EA có nhiều set file

Overfitting không chỉ giới hạn ở các quy tắc tự xây dựng. Hệ thống có càng nhiều bộ phận điều chỉnh được thì càng dễ bị khớp vào một mẫu trong quá khứ. Điều đó bao gồm các sản phẩm được mô tả là dựa trên mạng nơ-ron hoặc AI, vì một mô hình có nhiều tham số bên trong có thể khớp lịch sử rất sát. Hướng dẫn về EA giao dịch AI giải thích nhãn đó cho bạn biết điều gì và không cho bạn biết điều gì.

Trang sản phẩm cung cấp dữ kiện, không phải bằng chứng kiểm tra, nên hãy dùng chúng để quyết định cần xem xét gì chứ không phải để kỳ vọng gì. Ba ví dụ từ cửa hàng cho thấy những điều khác nhau cần kiểm tra.

Nhiều set file cho một mã giao dịch

EA Aurum AI cho MT4 là một Expert Advisor MT4 dành cho XAUUSD trên M5, được liệt kê với logic grid, martingale và theo xu hướng cùng 15 set file. Set file là một danh sách thiết lập đầu vào đã lưu mà bạn nạp vào MetaTrader. Khi một bản tải về có nhiều set file, câu hỏi hữu ích là vì sao chúng khác nhau và liệu mỗi file có được chọn trên một giai đoạn khác với giai đoạn bạn sẽ kiểm tra hay không. Trang sản phẩm không nói 15 file khác nhau như thế nào, vì vậy hãy mở từng file, đọc các giá trị và so sánh hành vi của chúng trên tài khoản demo.

Nhiều mã giao dịch, một khung thời gian

EA Perceptrader AI cho MT5 được liệt kê cho NZDUSD, USDCAD, AUDNZD và AUDCAD trên M5, với logic grid, scalping và mạng nơ-ron / AI cùng 12 set file. Nhiều mã giao dịch cho bạn một cách kiểm tra chéo tự nhiên: bạn có thể xem hành vi trên một cặp có gần giống hành vi trên các cặp còn lại hay không, đó là một phép thử nhỏ xem logic là tổng quát hay chỉ được tinh chỉnh cho một cặp.

Một mã giao dịch, nhiều tính năng chiến lược mạnh

EA Goldex AI cho MT5 được liệt kê cho XAUUSD trên M5 với hedging, martingale và giao dịch theo tin tức, cùng ba set file. Martingale nghĩa là khối lượng lot tăng lên sau một lệnh thua, nên một thay đổi nhỏ về thời điểm vào lệnh có thể làm thay đổi độ sâu của một chuỗi thua. Độ nhạy đó khiến việc kiểm tra EA hoạt động ra sao khi bạn nhích các tham số đầu vào và mô phỏng spread rộng hơn quanh thời điểm công bố tin trở nên đáng làm.

Không điều nào ở trên nói rằng các EA này bị hay không bị overfitting. Nó chỉ nói một người mua cẩn thận sẽ kiểm tra gì ở bất kỳ EA nào có cùng tính năng.

Các bước kiểm tra trước khi giao dịch thật với một EA khi lo ngại overfitting

Một quy trình ngắn sẽ không loại bỏ được sự bất định, nhưng loại bỏ được những sai lầm phổ biến nhất.

  1. Ghi lại những thiết lập bạn đã chọn và lý do, trước khi xem bài kiểm tra tiếp theo.
  2. Backtest trên một giai đoạn và giữ nguyên một giai đoạn sau đó chưa đụng đến, như đã mô tả ở trên.
  3. Nhích từng tham số quan trọng lên và xuống một bước nhỏ, và tìm một vùng bằng phẳng thay vì một đỉnh nhọn.
  4. Lặp lại bài kiểm tra với spread và trượt giá cao hơn.
  5. Chạy EA trên tài khoản demo trong khoảng thời gian đủ dài để bao gồm nhiều ngày thị trường khác nhau. Bài viết về kiểm tra trên tài khoản demo và tài khoản thật mô tả cách triển khai theo từng giai đoạn.
  6. So sánh hành vi trên demo với backtest: tần suất lệnh, thời gian giữ lệnh thông thường và hình dạng của các đợt drawdown. Các con số sẽ không khớp hoàn toàn, nhưng tính chất thì nên giống.
  7. Nếu bạn chuyển sang tài khoản thật, hãy bắt đầu với khối lượng nhỏ nhất mà sàn của bạn cho phép và tiếp tục theo dõi.

Khi hành vi thực tế khác đi

Nếu một tài khoản thật hoặc tài khoản demo hoạt động rất khác so với backtest, đừng vội tối ưu hóa lại trên vài tuần gần nhất. Đó là cùng một cái bẫy dưới hình thức mới: khớp với mẫu mới nhất. Trước tiên hãy kiểm tra các nguyên nhân tẻ nhạt, chẳng hạn hậu tố của mã giao dịch, spread, múi giờ và việc giao dịch algo đã được bật hay chưa. Nếu những điều đó đều ổn, hãy coi sự khác biệt là thông tin về chính EA.

Thực hiện kiểm tra overfitting trên tài khoản demo trong tuần này

Chọn một EA bạn đã có hoặc dự định kiểm tra. Chọn một mã giao dịch và khung thời gian từ trang sản phẩm của nó, chạy backtest trên một giai đoạn, giữ lại một giai đoạn sau đó và so sánh. Sau đó chạy nó trên tài khoản demo trong khi bạn ghi một nhật ký ngắn về những gì quan sát được. Mọi EA trong danh mục membership đều có thể được kiểm tra theo cách này, và mỗi EA là một sản phẩm số tải về mà bạn có thể nạp ngay vào tài khoản demo.

Giao dịch ngoại hối và CFD tiềm ẩn mức độ rủi ro cao và có thể không phù hợp với mọi nhà đầu tư. Hiệu suất trong quá khứ không đảm bảo kết quả trong tương lai; chỉ giao dịch bằng số tiền bạn có thể chấp nhận mất.

Thẻ: AI Trading EAs

← Tất cả bài viết

Mở khóa mọi EA với gói thành viên

309 sản phẩm · từ 16,59 US$/tháng

Xem các gói

Thêm trong EA giao dịch bằng AI