Ryzyka związane z danymi historycznymi w testach wstecznych na rynku Forex

Czym są dane historyczne w kontekście rynku Forex?

Dane historyczne to zapisane informacje z przeszłości opisujące, jak zmieniały się ceny w czasie (na przykład znaczniki czasowe kwotowań lub świece cenowe). W analizach takich jak testy wsteczne i testy forward, często traktuje się ten zbiór danych jako substytut tego, co mogło się wydarzyć we wcześniejszych warunkach.

Dane historyczne są przydatne do poznawania wzorców w danych oraz do oceny, jak dane podejście zachowałoby się przy określonych założeniach. Kluczowe ryzyko polega na tym, że zbiór danych jest przybliżeniem „rynku”, a nie idealnym odtworzeniem rzeczywistego przyszłego handlu.

Jak działają główne ryzyka związane z danymi historycznymi

Ryzyko danych historycznych zwykle pojawia się, gdy analiza zakłada, że przeszłe zachowanie będzie kontynuowane, lub gdy zakłada, że sposób modelowania kosztów i realizacji odpowiada rzeczywistości.

Ryzyka operacyjne i związane z jakością danych

Problemy operacyjne zaczynają się od samego zbioru danych.

• Brakujące, opóźnione, zduplikowane lub niespójne rekordy mogą zniekształcać obliczone stopy zwrotu i wskaźniki.
• Błędy stref czasowych i nieprawidłowe wyrównanie świec mogą sprawić, że strategia będzie wyglądać na reagującą wcześniej, niż było to możliwe.
• Różni dostawcy danych i typy kanałów mogą implikować różne spready, granularność kwotowań lub kolejność zdarzeń, zmieniając wyniki nawet przy tej samej koncepcji bazowej.

Istotnym trybem awarii jest „błąd posiadania informacji z przyszłości” (look-ahead bias), gdzie analiza nieumyślnie wykorzystuje informacje, które nie byłyby dostępne w momencie podejmowania decyzji.

Ryzyka rynkowe i związane ze zmianą reżimu

Nawet jeśli dane historyczne są dokładne, rynek może się zmienić.

• Zmienność, płynność i zachowania handlowe mogą się zmieniać w różnych okresach.
• Tarcia transakcyjne, takie jak spread i poślizg, często zmieniają się wraz z warunkami.
• Realizacja zleceń może się różnić, gdy zmienia się głębokość rynku lub płynność.

Podstawowym ograniczeniem jest to, że historyczne zależności nie przesądzają o przyszłych wynikach. Ta sama konfiguracja może działać inaczej, gdy warunki przechodzą do innego „reżimu”.

Ryzyka kontrahenta i realizacji

Dane historyczne zazwyczaj odzwierciedlają ceny, a niekoniecznie ścieżkę realizacji zleceń, którą byś otrzymał.

• Typy zleceń, polityki realizacji i pozycja w kolejce określają, czy i jak zlecenia są wykonywane.
• Koszty mogą obejmować więcej niż tylko spread, takie jak prowizje i inne opłaty.

Jeśli test wsteczny zakłada idealną realizację (na przykład, że zlecenia są wykonywane po kwotowanych cenach bez opóźnień), podczas gdy rzeczywista realizacja jest mniej korzystna, szacunki wyników mogą być znacząco błędne.

Ryzyka interpretacji i modelowania

Sposób interpretacji i transformacji danych historycznych może wprowadzać dodatkowe ryzyko.

• Przeuczenie (overfitting) jest powszechne: model może zostać dostrojony do szumu w próbce historycznej, a nie do stabilnego efektu.
• Wybór parametrów na podstawie wyników w tym samym zbiorze danych może stworzyć fałszywe poczucie solidności.
• Niestacjonarność oznacza, że właściwości statystyczne mogą się zmieniać w czasie, więc wnioski z jednego okresu mogą nie być przenośne.

Ograniczenia i jak samodzielnie zweryfikować, co się da

Aby zweryfikować twierdzenia dotyczące wyników analiz, traktuj każde obliczenie jako warunkowe względem jawnych założeń.

Użyj jasnej listy kontrolnej założeń

Co najmniej udokumentuj:

• Dokładną definicję zbioru danych (typ świecy, znaczniki czasu, obsługa stref czasowych i kroki czyszczenia).
• Założenia dotyczące realizacji (moment wejścia, typ zlecenia, czy modelowany jest poślizg lub opłaty i jak są stosowane).
• Metodę oceny (które okresy są używane do wyboru parametrów, a które do oceny).

Sprawdź typowe tryby awarii

• Poszukaj wycieku danych, potwierdzając, że każda decyzja wykorzystuje wyłącznie informacje dostępne w danym momencie.
• Oceń wrażliwość, powtarzając testy przy rozsądnych alternatywnych założeniach (na przykład szerszych założeniach kosztowych), aby sprawdzić, czy wyniki zależą od kruchych szczegółów.
• Używaj wielu, nienakładających się okien czasowych, aby nie wyciągać wniosków z jednego korzystnego okresu.

Jeśli wyniki zmieniają się drastycznie po zmianie założeń wpływających na realizm realizacji, jest to znak, że ryzyko danych historycznych dominuje.

Następne pytanie do rozważenia: co dokładnie jest zakładane?

Przydatnym pytaniem kontrolnym jest: „Jaką przyszłą rzeczywistość zakładam, że jest taka sama jak przeszły zbiór danych?” Jeśli odpowiedź opiera się na nieujawnionych założeniach dotyczących dokładności danych, realizacji, płynności lub stabilności zależności, związane z tym ryzyko jest prawdopodobnie wysokie.

Jak podsumować ryzyka

Dane historyczne są narzędziem do testowania pomysłów przy określonych założeniach, ale niosą ze sobą ryzyka w czterech obszarach:

• Operacyjne/jakość danych (w tym wyrównanie i wyciek danych)
• Zmiana rynku/reżimu (w tym zmienne tarcia)
• Kontrahent/realizacja (w tym realizacja zleceń i koszty)
• Interpretacja/modelowanie (w tym przeuczenie i niestabilne zależności)