ในการวิจัยกลยุทธ์ Overfitting หมายถึงการเลือกกฎที่อธิบายความเฉพาะตัวของชุดข้อมูลที่ใช้พัฒนาได้อย่างน่าเชื่อถือยิ่งกว่าที่กฎนั้นจะใช้ได้ทั่วไปกับข้อมูลใหม่ เทรดเดอร์มักเรียกสิ่งนี้ว่า Curve Fitting กลยุทธ์ไม่จำเป็นต้องตรงกับข้อมูลในอดีตอย่างสมบูรณ์แบบจึงจะถือว่า Overfit

การค้นหาสร้างปัญหา

ลองนึกภาพการทดสอบชุดค่าผสมของเส้นค่าเฉลี่ยเคลื่อนที่จำนวน 200 ชุด แล้วรายงานเฉพาะชุดที่ทำกำไรได้มากที่สุด แม้ว่าไม่มีชุดใดมีความได้เปรียบที่ยั่งยืน ชุดหนึ่งอาจดูน่าสนใจได้ในตัวอย่างนั้น การเปลี่ยนตัวกรอง ตลาด วันที่ และระยะห่างของ Stop จะเพิ่มโอกาสในการคัดเลือกมากขึ้น รวมถึงการเลือกด้วยมือขณะดูชาร์ต

การที่ชุดพารามิเตอร์หนึ่งชนะไม่ได้ทำให้ชุดนั้นไม่ถูกต้องโดยอัตโนมัติ ข้อกังวลคือผลการดำเนินงานที่รายงานนั้นได้ประโยชน์จากการที่ชุดนี้ถูกเลือกโดยใช้ผลลัพธ์ชุดเดียวกับที่คุณนำมาเป็นหลักฐานในตอนนี้

จัดทำบันทึกการวิจัย

บันทึกสมมติฐาน ข้อมูลที่ใช้พัฒนา การเลือกพารามิเตอร์ และทุกการปรับเปลี่ยนที่ทดสอบ แยกช่วงทดสอบสุดท้ายไว้ต่างหาก เมื่อคุณตรวจสอบช่วงนั้นและปรับกลยุทธ์ตามผลลัพธ์ ช่วงนั้นก็กลายเป็นส่วนหนึ่งของการพัฒนา การเรียกช่วงนั้นว่า Out-of-Sample อีกครั้งไม่ได้คืนความเป็นอิสระให้

กระบวนการ Walk-Forward สามารถจำลองการพัฒนาที่เกิดขึ้นซ้ำและการประเมินในภายหลังได้ แต่ความยาวหน้าต่างและกฎการคัดเลือกของกระบวนการนั้นก็ต้องกำหนดให้คงที่และบันทึกไว้ด้วย การเปลี่ยนกระบวนการซ้ำแล้วซ้ำเล่าจนผลลัพธ์โดยรวมดูดีจะทำให้ปัญหาเดิมกลับมาอีกครั้ง

ตั้งคำถามกับทางเลือกที่อยู่ใกล้เคียง

ตรวจสอบว่าการเปลี่ยนแปลงเล็กน้อยของพารามิเตอร์ ต้นทุน หรือจังหวะการเข้าเทรดทำลายผลลัพธ์หรือไม่ จุดที่เหมาะสมที่สุดแบบแคบและแยกโดดเดี่ยวสมควรได้รับการตรวจสอบ ทดสอบช่วงเวลาเพิ่มเติมที่เกี่ยวข้องกับตลาดที่มุ่งเป้า และรายงานทั้งความล้มเหลวและความสำเร็จ

กลยุทธ์ที่ออกแบบมาสำหรับตลาดหนึ่งไม่จำเป็นต้องใช้ได้กับตลาดอื่นทุกตลาด เช่นเดียวกัน ไม่มีจำนวนพารามิเตอร์สากลที่เมื่อเกินกว่านั้นแล้วโมเดลจะ Overfit อย่างแน่นอน ความซับซ้อน ปริมาณข้อมูลในตัวอย่าง จำนวนครั้งที่ทดลอง และการออกแบบการตรวจสอบความถูกต้อง ล้วนมีความสำคัญ

แยก Overfitting ออกจากข้อผิดพลาดอื่น

Backtest อาจล้มเหลวได้ด้วยสาเหตุอื่นนอกเหนือจากการคัดเลือก เช่น ข้อมูลจากอนาคต การปรับ Corporate Action ที่ไม่ถูกต้อง การจับคู่คำสั่งที่ไม่สมจริง หรือต้นทุนที่ถูกละเว้น TradingView อธิบายข้อผิดพลาดที่อาจเกิดขึ้นในการทดสอบกลยุทธ์ รวมถึง Lookahead Bias และ Overfitting ควรตรวจสอบสาเหตุเหล่านี้แยกจากกัน แทนที่จะติดป้ายความคลาดเคลื่อนในการเทรดจริงทุกกรณีด้วยชื่อเดียวกัน

AI ไม่ได้ขจัดความจำเป็นของกระบวนการนี้ โมเดลที่ค้นหารูปแบบที่เป็นไปได้จำนวนมากยังคงต้องได้รับการประเมินภายใต้การควบคุม กราฟที่น่าประทับใจเป็นจุดเริ่มต้นของการตรวจสอบ ไม่ใช่บทสรุป