EA Overfitting คืออะไร: ทำไม Backtest ที่ดูสมบูรณ์แบบจึงอาจล้มเหลวในบัญชีจริง
EABuild Team · · อ่าน 3 นาที

ในหน้านี้
- EA Overfitting หมายถึงอะไร อธิบายแบบเข้าใจง่าย
- EA ที่ผ่านการ Optimize ถูกจูนให้เข้ากับราคาเก่าได้อย่างไร
- สัญญาณเตือนของ EA ที่ Overfit ในรายงาน Backtest
- อธิบาย in-sample, out-of-sample และ walk-forward testing
- EA Overfitting ใน EA ที่ติดป้าย AI และ EA ที่มีหลายไฟล์ Set
- สิ่งที่ควรตรวจก่อนเทรด EA บนบัญชีจริงเมื่อกังวลเรื่อง Overfitting
- ลองตรวจ Overfitting บนบัญชีทดลองในสัปดาห์นี้
EA Overfitting เกิดขึ้นเมื่อการตั้งค่าของ Expert Advisor ถูกจูนให้เข้ากับราคาในอดีตช่วงหนึ่งมากเกินไป จน EA เพียงแค่อธิบายประวัติราคาช่วงนั้น แทนที่จะสะท้อนพฤติกรรมตลาดที่เกิดซ้ำได้ Backtest ดูเรียบเนียนเพราะการตั้งค่าถูกเลือกมาให้ดูเรียบเนียน บทความนี้อธิบายว่า Overfitting เกิดขึ้นได้อย่างไร จะสังเกตได้อย่างไรจากรายงานของ Strategy Tester และการทดสอบง่าย ๆ แบบใดช่วยลดโอกาสที่คุณจะเชื่อผลที่เกิดจากสิ่งนี้
EA Overfitting หมายถึงอะไร อธิบายแบบเข้าใจง่าย
EA ทุกตัวมีพารามิเตอร์ เช่น ช่วงคาบเวลา ระยะห่าง ขนาดล็อต และตัวกรองเวลา เมื่อเปลี่ยนพารามิเตอร์ ผล Backtest ก็เปลี่ยนตาม หากลองชุดค่าผสมมากพอบนประวัติราคาชุดเดียวกัน จะมีอย่างน้อยหนึ่งชุดที่เข้ากับประวัตินั้นได้ดีมาก ส่วนหนึ่งเพราะพฤติกรรมที่เกิดขึ้นจริง และอีกส่วนหนึ่งเพราะความบังเอิญล้วน ๆ Overfitting หรือที่เรียกว่า curve fitting คือการเลือกชุดค่าผสมที่เข้ากับสัญญาณรบกวน
เปรียบเทียบได้กับนักเรียนที่ท่องคำตอบข้อสอบปีที่แล้ว คะแนนข้อสอบปีนั้นยอดเยี่ยม แต่นักเรียนไม่ได้เรียนรู้เนื้อหาจริง พอเจอข้อสอบใหม่ที่คำถามต่างออกไปก็ทำได้ไม่ดี EA ที่ Overfit ก็เหมือนจำประวัติราคาชุดหนึ่งไว้ และการเทรดจริงคือข้อสอบใหม่
ทำไมจึงเผลอทำได้ง่าย
ไม่จำเป็นต้องมีเจตนาไม่ดีเลยก็เกิดขึ้นได้ Strategy Tester ใน MetaTrader ให้คุณรัน Optimization (ชุดการทดสอบหลายรอบที่เปลี่ยนค่าพารามิเตอร์ไปเรื่อย ๆ) แล้วเรียงผลตามกำไรได้ แถวบนสุดดูน่าสนใจ แต่แถวบนสุดก็เป็นเพียงรอบที่บังเอิญเข้ากับช่วงข้อมูลตัวอย่างมากที่สุด
- ยิ่ง Optimize พารามิเตอร์มาก ชุดค่าผสมก็ยิ่งมาก และยิ่งหาชุดที่เข้ากันโดยบังเอิญได้ง่าย
- ยิ่งประวัติราคาสั้น EA ก็ยิ่งผ่านสภาวะตลาดที่แตกต่างกันน้อยลง
- ยิ่ง EA มีกฎมาก ก็ยิ่งมีช่องว่างให้ปรับตัวตามเหตุการณ์เฉพาะในอดีต
EA ที่ผ่านการ Optimize ถูกจูนให้เข้ากับราคาเก่าได้อย่างไร
ลองดู EA แบบ Breakout อย่างง่ายที่มีพารามิเตอร์ห้าตัว คุณทดสอบกับข้อมูล M15 หนึ่งปีแล้วรัน Optimization รอบหนึ่งแสดง Stop Loss ขนาดเฉพาะค่าหนึ่ง ความยาวของช่วงราคาค่าหนึ่ง และตัวกรองช่วงเวลาที่บังเอิญข้ามสามสัปดาห์ที่แย่ไปพอดี เส้น Equity ดูนิ่งสม่ำเสมอ
ค่าที่แน่นอนเหล่านั้นไม่จำเป็นต้องมีความหมายอะไรเลย Stop Loss ที่ใหญ่หรือเล็กกว่าเล็กน้อยอาจให้เส้นผลลัพธ์ที่แย่กว่ามาก ความอ่อนไหวนี้คือสัญญาณสำคัญ ผลลัพธ์ที่ดีอยู่บนยอดแหลมแคบ ๆ ไม่ใช่บนที่ราบกว้างซึ่งค่าข้างเคียงก็ใช้ได้พอสมควรเช่นกัน
ตัวกรองที่ตัดการขาดทุนในอดีตออกไป
ตัวกรองเวลาและตัวกรองข่าวอาจสมเหตุสมผล แต่ก็อาจถูกใช้ตัดวันที่ทำให้ Backtest เสียหายออกไปพอดีได้เช่นกัน กฎที่ข้ามไปแค่ไม่กี่สัปดาห์ที่ระบุไว้ ยากที่จะอธิบายด้วยเหตุผลของตลาด ส่วนกฎที่หลีกเลี่ยงไม่กี่นาทีแรกรอบการประกาศข่าวตามกำหนดนั้นอธิบายได้ ทดสอบกับช่วงเวลาอื่นได้ และยังสมเหตุสมผลกับข้อมูลที่ EA ไม่เคยเห็น
ต้นทุนที่การทดสอบมองข้ามไป
Backtest อาจดูดีกว่าความจริงได้ เพราะ Spread คอมมิชชัน หรือ slippage ที่จำลองไว้เบากว่าที่โบรกเกอร์ของคุณเรียกเก็บจริง กรณีนี้ไม่ใช่ Overfitting ในความหมายที่เคร่งครัด แต่ให้ผลคล้ายกัน คือผลทดสอบอธิบายตลาดที่ไม่มีอยู่จริงสำหรับบัญชีของคุณ คู่มือเรื่อง การทำ Backtest EA ใน MT5 และ การทำ Backtest EA ใน MT4 อธิบายวิธีตั้งค่า Tester ให้จำลองต้นทุนได้ใกล้เคียงที่สุดเท่าที่แพลตฟอร์มทำได้
สัญญาณเตือนของ EA ที่ Overfit ในรายงาน Backtest
คุณพิสูจน์ Overfitting จากรายงานฉบับเดียวไม่ได้ แต่หากพบสัญญาณหลายอย่างพร้อมกัน ควรระมัดระวังไว้
- เส้นผลลัพธ์เรียบมากและแทบไม่มีช่วงขาดทุน ตลาดจริงเปลี่ยนลักษณะอยู่เสมอ เส้นที่ไม่มีจุดตึงเครียดให้เห็นเลยตลอดการทดสอบที่ยาวนาน อาจถูกคัดเลือกมา ไม่ได้เกิดขึ้นจากความสามารถจริง
- ผลลัพธ์พังเมื่อขยับพารามิเตอร์เล็กน้อย ลองเปลี่ยนช่วงคาบเวลาไปเพียงหนึ่งก้าวเล็ก ๆ หากรายงานเปลี่ยนไปโดยสิ้นเชิง แสดงว่าการตั้งค่านั้นอยู่บนยอดแหลม
- พารามิเตอร์จำนวนมากที่มีค่าเฉพาะเจาะจงผิดปกติ ค่าอย่าง Stop Loss ขนาดเฉพาะเจาะจงมากโดยไม่ระบุเหตุผล บ่งชี้ว่าตัวเลขมาจากการรัน Optimization
- ผลดีเฉพาะสินทรัพย์และไทม์เฟรมเดียว EA บางตัวออกแบบมาสำหรับสินทรัพย์เดียวบนไทม์เฟรมเดียว ซึ่งก็ไม่มีปัญหา แต่หากตรรกะอ้างแนวคิดทั่วไปแต่ใช้ได้เพียงคู่สินทรัพย์กับไทม์เฟรมเดียว ควรตั้งคำถามว่าเพราะอะไร
- ช่วงทดสอบสั้น หรือครอบคลุมตลาดเพียงแบบเดียว EA เทรดตามเทรนด์ที่ทดสอบเฉพาะช่วงที่เทรนด์แรง ยังไม่เคยเจอสภาวะที่ยากของมัน
- จำนวนเทรดน้อย เทรดเพียงหยิบมืออาจดูน่าประทับใจ แต่บอกอะไรได้น้อยมาก
อธิบาย in-sample, out-of-sample และ walk-forward testing
วิธีป้องกันมาตรฐานของ Overfitting คือกันข้อมูลบางส่วนไว้ไม่ให้ Optimization เห็น ศัพท์เหล่านี้อธิบายวิธีการนั้น
ข้อมูล in-sample และ out-of-sample
ช่วง in-sample คือช่วงประวัติราคาที่คุณใช้เลือกการตั้งค่า ส่วนช่วง out-of-sample คือช่วงที่ตามมาทีหลังซึ่งคุณไม่แตะต้องระหว่างเลือกการตั้งค่า คุณเลือกการตั้งค่าจากส่วนแรก แล้วรัน EA เพียงครั้งเดียวบนส่วนที่สองด้วยการตั้งค่าเดิมโดยไม่แก้ไข หากพฤติกรรมใน out-of-sample มีลักษณะคล้ายกับ in-sample เช่น ความถี่ของเทรดและรูปแบบ Drawdown (การลดลงจากยอดเงินคงเหลือสูงสุดของบัญชี) ใกล้เคียงกัน ก็มีโอกาสน้อยลงที่การเข้ากันนั้นจะเป็นเรื่องบังเอิญ แต่หากดูเหมือนเป็น EA คนละตัว ให้สงสัยผล in-sample นั้นไว้
กฎสองข้อทำให้วิธีนี้มีประโยชน์ ข้อแรก ช่วง out-of-sample ต้องมาจากเวลาหลังช่วง in-sample เพราะ EA จะเทรดไปข้างหน้าตามเวลา ข้อสอง คุณดูได้เพียงครั้งเดียว หากดูผล out-of-sample แล้วแก้การตั้งค่าและดูอีกครั้ง ข้อมูลนั้นกลายเป็น in-sample ไปแล้ว และคุณสูญเสียการป้องกัน
Walk-forward testing
Walk-forward testing ทำซ้ำแนวคิดนี้เป็นขั้น ๆ คุณ Optimize บนหน้าต่างประวัติราคาหนึ่งช่วง ทดสอบบนหน้าต่างที่อยู่ถัดไปทันที จากนั้นเลื่อนทั้งสองหน้าต่างไปข้างหน้าแล้วทำซ้ำ ผลที่ได้คือห่วงโซ่ของช่วง out-of-sample ซึ่งแต่ละช่วงทดสอบด้วยการตั้งค่าที่เลือกจากข้อมูลก่อนหน้าเท่านั้น วิธีนี้บอกว่ากระบวนการ Optimize EA มีแนวโน้มให้ค่าที่ใช้ได้ต่อเนื่องหรือไม่ ไม่ใช่แค่ว่าชุดค่าชุดเดียวใช้ได้หรือเปล่า
MetaTrader 5 มีตัวเลือก forward testing ใน Strategy Tester ที่กันช่วงท้ายของช่วงเวลาไว้หลังการ Optimization ส่วนขั้นตอน walk-forward เต็มรูปแบบข้ามหลายหน้าต่างมักต้องใช้สคริปต์เพิ่มเติมหรือเครื่องมือภายนอก เทรดเดอร์จำนวนมากจึงทำแบบย่อด้วยมือ คือ Optimize ทดสอบบนช่วงถัดไป เลื่อนต่อ แล้วเปรียบเทียบแต่ละช่วง
การตรวจสอบเพิ่มเติมแบบอื่น
- รัน EA ตัวเดียวกันบนสินทรัพย์ใกล้เคียงหรือไทม์เฟรมอื่นที่แนวคิดน่าจะใช้ได้ด้วย แล้วดูว่าพฤติกรรมโดยรวมคล้ายกันหรือไม่
- ทดสอบด้วย Spread ที่สูงขึ้นและมี slippage บ้าง เพื่อดูว่าความได้เปรียบนั้นเปราะบางแค่ไหน
- ทดสอบในช่วงเวลาที่มีภาวะตลาดต่างออกไป เช่น ช่วงไซด์เวย์เงียบ ๆ ตามด้วยการเคลื่อนไหวแรง
EA Overfitting ใน EA ที่ติดป้าย AI และ EA ที่มีหลายไฟล์ Set
Overfitting ไม่ได้จำกัดอยู่แค่กฎที่เขียนด้วยมือ ระบบที่มีส่วนปรับแต่งได้มากเท่าไร ก็ยิ่งถูกจูนให้เข้ากับข้อมูลตัวอย่างในอดีตได้มากเท่านั้น รวมถึงสินค้าที่อธิบายว่าใช้โครงข่ายประสาทเทียมหรือ AI เพราะโมเดลที่มีพารามิเตอร์ภายในจำนวนมากสามารถเข้ากับประวัติราคาได้ใกล้ชิดมาก คู่มือ AI trading EA อธิบายว่าป้ายกำกับนี้บอกอะไรและไม่ได้บอกอะไรคุณ
รายการสินค้าให้ข้อเท็จจริง ไม่ใช่หลักฐานจากการทดสอบ ดังนั้นให้ใช้เพื่อตัดสินใจว่าจะตรวจสอบอะไร ไม่ใช่จะคาดหวังอะไร ตัวอย่างสามรายการจากร้านแสดงสิ่งที่ควรตรวจสอบต่างกัน
หลายไฟล์ Set สำหรับสินทรัพย์เดียว
Aurum AI EA สำหรับ MT4 เป็น Expert Advisor บน MT4 สำหรับ XAUUSD บน M5 ระบุไว้ว่าใช้ตรรกะ Grid, Martingale และเทรดตามเทรนด์ พร้อมไฟล์ Set 15 ไฟล์ ไฟล์ Set คือรายการการตั้งค่าพารามิเตอร์ที่บันทึกไว้ซึ่งคุณโหลดใน MetaTrader เมื่อดาวน์โหลดมาพร้อมไฟล์ Set จำนวนมาก คำถามที่มีประโยชน์คือเหตุใดจึงต่างกัน และแต่ละไฟล์ถูกเลือกจากช่วงเวลาคนละช่วงกับที่คุณจะทดสอบหรือไม่ รายการสินค้าไม่ได้บอกว่า 15 ไฟล์ต่างกันอย่างไร ดังนั้นให้เปิดดูแต่ละไฟล์ อ่านค่า และเปรียบเทียบพฤติกรรมบนบัญชีทดลอง
หลายสินทรัพย์ ไทม์เฟรมเดียว
Perceptrader AI EA สำหรับ MT5 ระบุไว้สำหรับ NZDUSD, USDCAD, AUDNZD และ AUDCAD บน M5 พร้อมตรรกะ Grid, Scalping และโครงข่ายประสาทเทียม / AI และไฟล์ Set 12 ไฟล์ การมีหลายสินทรัพย์ทำให้คุณมีการตรวจสอบไขว้ตามธรรมชาติ คือดูว่าพฤติกรรมบนคู่เงินหนึ่งคล้ายกับคู่อื่นคร่าว ๆ หรือไม่ ซึ่งเป็นการทดสอบเล็ก ๆ ว่าตรรกะนั้นใช้ได้ทั่วไปหรือถูกจูนให้เข้ากับคู่เงินเดียว
สินทรัพย์เดียว คุณสมบัติกลยุทธ์เด่น
Goldex AI EA สำหรับ MT5 ระบุไว้สำหรับ XAUUSD บน M5 พร้อม Hedging, Martingale และเทรดข่าว และไฟล์ Set สามไฟล์ Martingale หมายถึงขนาดล็อตเพิ่มขึ้นหลังเทรดที่ขาดทุน ดังนั้นการเปลี่ยนจังหวะเข้าออเดอร์เพียงเล็กน้อยอาจเปลี่ยนความลึกของช่วงขาดทุนต่อเนื่องได้ ความอ่อนไหวนี้ทำให้ควรทดสอบว่า EA ทำงานอย่างไรเมื่อขยับพารามิเตอร์ และจำลอง Spread ที่กว้างขึ้นรอบการประกาศข่าว
ทั้งหมดนี้ไม่ได้บอกว่า EA เหล่านี้ Overfit หรือไม่ Overfit แต่บอกว่าผู้ซื้อที่รอบคอบจะทดสอบอะไรกับ EA ใดก็ตามที่มีคุณสมบัติเหมือนกัน
สิ่งที่ควรตรวจก่อนเทรด EA บนบัญชีจริงเมื่อกังวลเรื่อง Overfitting
ขั้นตอนสั้น ๆ ไม่ได้ขจัดความไม่แน่นอนได้ แต่ช่วยขจัดความผิดพลาดที่พบบ่อยที่สุด
- จดไว้ว่าคุณเลือกการตั้งค่าใดและเพราะอะไร ก่อนดูผลการทดสอบครั้งถัดไป
- ทำ Backtest บนช่วงเวลาหนึ่ง และกันช่วงหลังไว้โดยไม่แตะต้อง ตามที่อธิบายข้างต้น
- ขยับพารามิเตอร์หลักแต่ละตัวขึ้นและลงทีละก้าวเล็ก ๆ แล้วมองหาที่ราบ ไม่ใช่ยอดแหลม
- ทดสอบซ้ำด้วย Spread และ slippage ที่สูงขึ้น
- รัน EA บนบัญชีทดลองนานพอที่จะครอบคลุมวันตลาดที่แตกต่างกันหลายวัน บทความเรื่องการทดสอบบนบัญชีทดลองและบัญชีจริง อธิบายวิธีวางขั้นตอนนี้
- เปรียบเทียบพฤติกรรมบนบัญชีทดลองกับ Backtest ได้แก่ ความถี่ของเทรด ระยะเวลาถือเทรดโดยทั่วไป และรูปทรงของ Drawdown ตัวเลขจะไม่ตรงกันเป๊ะ แต่ลักษณะโดยรวมควรใกล้เคียงกัน
- หากย้ายไปบัญชีจริง ให้เริ่มด้วยขนาดที่เล็กที่สุดที่โบรกเกอร์อนุญาต และตรวจสอบต่อเนื่อง
เมื่อพฤติกรรมบนบัญชีจริงต่างออกไป
หากบัญชีจริงหรือบัญชีทดลองทำงานต่างจาก Backtest มาก อย่ารีบ Optimize ใหม่จากข้อมูลไม่กี่สัปดาห์ล่าสุดทันที นั่นคือกับดักเดิมในรูปแบบใหม่ คือการจูนให้เข้ากับข้อมูลตัวอย่างล่าสุด ให้ตรวจสาเหตุธรรมดา ๆ ก่อน เช่น ส่วนต่อท้ายชื่อสินทรัพย์ Spread เขตเวลา และการเปิดใช้งาน algo trading หากทั้งหมดปกติ ให้ถือว่าความแตกต่างนั้นเป็นข้อมูลเกี่ยวกับตัว EA
ลองตรวจ Overfitting บนบัญชีทดลองในสัปดาห์นี้
เลือก EA หนึ่งตัวที่คุณมีอยู่แล้วหรือวางแผนจะทดสอบ เลือกสินทรัพย์และไทม์เฟรมจากรายการสินค้า รัน Backtest บนช่วงเวลาหนึ่ง กันช่วงหลังไว้ แล้วเปรียบเทียบ จากนั้นรันบนบัญชีทดลองพร้อมจดบันทึกสั้น ๆ ว่าเห็นอะไร EA ใดก็ตามในแคตตาล็อกแพ็กเกจสมาชิกทดสอบด้วยวิธีนี้ได้ และทุกตัวเป็นสินค้าดิจิทัลแบบดาวน์โหลดที่โหลดลงบัญชีทดลองได้ทันที
การซื้อขายแลกเปลี่ยนเงินตราต่างประเทศและ CFD มีความเสี่ยงสูงและอาจไม่เหมาะสมกับนักลงทุนทุกคน ผลการดำเนินงานในอดีตไม่ได้รับประกันผลลัพธ์ในอนาคต โปรดซื้อขายด้วยเงินที่คุณสามารถรับความสูญเสียได้เท่านั้น
แท็ก: AI Trading EAs


