저희 XAUUSD 시스템의 버전 2에는 ONNX 신경망 모델이 들어 있었습니다. 백테스트 성적이 훌륭해 보였고, 저희는 그것을 공개했습니다. 그 뒤 정말 중요한 검증을 했고, 모델은 통과하지 못했습니다.
학습 기간과 백테스트 기간이 같은 기간이었다
모델은 2020년 1월부터 2026년 7월까지의 데이터로 학습했습니다. 그리고 인상적인 자산 곡선은 정확히 같은 기간 안에서 측정된 것입니다. 이것은 엣지의 증거가 아니라 적합도의 시연입니다. 이미 그 데이터를 본 모델은 무언가를 예측할 수 있든 없든 그 기간을 잘 설명합니다.
한 번도 보지 못한 연도들
모델이 한 번도 본 적 없는 2016년부터 2019년으로 검증했습니다. 저희 테스트에서는 손실이었습니다. 함께 돌리던 포워드 계좌도 같은 관측 기간에 기대값이 음수였습니다. 모델을 뒷받침할 수 있는 유일한 데이터에서, 독립적인 두 검증이 모두 부정적이었습니다.
저희가 한 조치
선택지는 둘이었습니다. 보기 좋은 표본 내 차트를 계속 게시하거나, 엔진을 교체하거나. 버전 3.10에서 신경망 모델을 제거했습니다. 진입 게이트는 그래디언트 부스팅으로 다시 만들고 워크포워드 분석으로 검증했습니다. 즉 판단 규칙은 항상 학습하지 않은 기간에서 시험받습니다. 업데이트는 기존 사용자에게 무료였습니다. 예전 백테스트는 '표본 내'라고 명시한 채 제품 페이지에 그대로 남겨 두었습니다. 지우는 것은 잘못을 바로잡는 것이 아니라 감추는 것이기 때문입니다.
어떤 판매자에게든 쓸 수 있는 확인법
날짜 두 개를 물어보십시오. 모델의 학습 기간과, 지금 보여주는 백테스트의 기간입니다. 둘이 겹친다면 눈앞의 숫자는 모델이 과거를 얼마나 잘 외웠는지를 말할 뿐, 미래에 대해서는 아무것도 말하지 않습니다. 이는 다른 곳의 현행 제품과 마찬가지로 저희의 예전 버전에도 그대로 적용됩니다.
위 실패를 포함한 전체 측정 이력을 공개한, 재구축된 시스템: https://www.mql5.com/en/market/product/187329
전체 제품과 무료 도구: https://www.mql5.com/en/users/app.develop.sk/seller
모든 EA의 실측 백테스트 데이터(프로핏 팩터, 유효증거금 드로다운, 거래 수, 연도별 성적)를 공개하고 있습니다: fxea365.com/ea/ranking
