Co początkujący powinni wiedzieć o testowaniu wstecznym EA

Czym jest testowanie wsteczne EA (a czym nie jest)

Testowanie wsteczne EA to proces polegający na zastosowaniu reguł systemu transakcyjnego opartego na regułach (często nazywanego Expert Advisor, lub w skrócie EA) do historycznych danych cenowych w celu sprawdzenia, jak zachowywałby się w przeszłości. Wynik nie jest dowodem przyszłych wyników. Jest to dowód na to, jak reguły zareagowały na dane z przeszłości przy określonych założeniach symulacyjnych.

Testowanie wsteczne różni się również od handlu na koncie demo (paper trading) czy handlu na żywo. W testowaniu wstecznym kontrolujesz dane wejściowe (dane historyczne i wybór modelowania). Na rynkach na żywo dane wejściowe mogą się różnić: spready się zwiększają, występują opóźnienia w realizacji, a płynność się zmienia.

Jak działa testowanie wsteczne EA w praktyce

Większość testów wstecznych przebiega według tego samego podstawowego schematu:

1. Zdefiniuj reguły strategii. EA zazwyczaj zawiera logikę wejścia/wyjścia, logikę określania wielkości pozycji oraz reguły zarządzania ryzykiem lub kapitałem. Te reguły określają, jakie zlecenia zostałyby wygenerowane.

2. Wybierz dane historyczne. „Ceny historyczne” użyte w teście wpływają na wynik. Jeśli zbiór danych ma luki, inną jakość ticków lub inną formację świec niż oczekuje EA, wyniki mogą być mylące.

3. Zamodeluj szczegóły wykonania. Test wsteczny często wymaga założeń dotyczących spreadu, prowizji, poślizgu (slippage), realizacji zleceń oraz tego, czy stop lossy i take profity są realizowane dokładnie w momencie pojawienia się ceny. Niewielkie zmiany tutaj mogą przesunąć rentowność i poziomy drawdownu.

4. Uruchom symulację. Silnik przechodzi przez czas i stosuje reguły EA. Jeśli EA używa wskaźników, są one obliczane wyłącznie na podstawie informacji dostępnych do każdego symulowanego momentu.

5. Oceń metryki wydajności. Typowe metryki obejmują zwrot netto, drawdown, wskaźnik wygranych transakcji i rozkład transakcji. Interpretacja tych metryk wymaga zrozumienia okresu czasu, uwzględnionych kosztów oraz tego, czy EA był dostrajany.

Dowody i przykłady: skąd mogą pochodzić „dobre” wyniki

Realistyczny przykład pomaga wyjaśnić typowe pułapki:

• Załóżmy, że EA wygląda na silny w danych historycznych z jednego miesiąca, ponieważ trend rynkowy odpowiadał logice EA. Jeśli ta logika zależy od stałego momentum, te same reguły mogą działać słabo w trendach bocznych lub w zmiennych warunkach.

• Załóżmy, że test wsteczny ignoruje lub zaniża koszty transakcyjne. W prawdziwym handlu spready i prowizje zmniejszają zyski, a poślizg zmienia ceny wejścia/wyjścia. Test wsteczny, który nie uwzględnia realistycznych kosztów, może zawyżać wyniki.

• Załóżmy, że parametry EA były wielokrotnie dostosowywane w celu maksymalizacji wyników na jednym zbiorze danych. Może to stworzyć rozwiązanie przeuczone (overfitted): „uczy się” ono osobliwości przeszłości, a nie ogólnego zachowania rynku.

Istotne ograniczenia i tryby awarii

Początkujący powinni traktować wyniki testów wstecznych jako warunkowe względem założeń. Istotne ograniczenia obejmują:

1. Zmiana reżimu rynkowego Zależności, które pojawiły się w przeszłości, często nie utrzymują się. Nawet jeśli reguły strategii pozostają takie same, zachowanie rynku może się zmienić.

2. Niedopasowanie wykonania Założenia testów wstecznych dotyczące realizacji zleceń, poślizgu oraz wyzwalania stop lossów/take profitów mogą różnić się od rzeczywistego wykonania.

3. Jakość i próbkowanie danych Dane historyczne mogą nie odtwarzać dokładnej sekwencji ticków lub świec, jakiej oczekuje EA. Może to zmienić wartości wskaźników i czas generowania sygnałów.

4. Przeuczenie (overfitting) Jeśli dostrajanie parametrów, wybór wskaźników lub filtry są wielokrotnie optymalizowane dla jednego okresu, strategia może stać się krucha.

5. Błąd przetrwania (survivorship bias) i błąd selekcji (gdy ma to zastosowanie) Jeśli test wykorzystuje wybiórczo wybrane okna czasowe (na przykład tylko „dobrze wyglądające” okresy), wyniki mogą być obciążone.

Jak samodzielnie zweryfikować istotne fakty

Praktycznym punktem kontrolnym jest weryfikacja, czy test wsteczny odpowiada na testowalne pytanie przy jawnych założeniach.

Rozważ następujące kroki weryfikacji:

• Powtórz test, używając spójnych danych wejściowych. Sprawdź, czy ten sam zestaw danych historycznych i te same ustawienia EA dają te same wyniki.

• Użyj wielu nienakładających się okresów czasu. Testowanie w różnych latach (lub przynajmniej w różnych warunkach rynkowych) pomaga ujawnić, czy wyniki zależą od jednego reżimu.

• Uwzględnij realistyczne ustawienia kosztów i wykonania. Jeśli test wsteczny nie modeluje kosztów, takich jak prowizje i spready (i nie uwzględnia założeń dotyczących poślizgu tam, gdzie ma to znaczenie), traktuj wyniki jako niekompletne.

• Przeprowadź testy wrażliwości (stress-test). Jeśli niewielkie zmiany parametrów lub modelowania wykonania drastycznie zmieniają wynik, oznacza to kruchość strategii.

• Porównaj logikę treningu i walidacji. Jeśli parametry były optymalizowane na jednym okresie, zwaliduj je na osobnym okresie, który nie był używany do dostrajania.