Częste błędy dotyczące wskaźnika skuteczności (Win Rate) (i jak je sprawdzić)
Co w prostych słowach oznacza „wskaźnik skuteczności”
Wskaźnik skuteczności to ułamek transakcji (lub wyników), które są zwycięskie. W prostej formie oblicza się go jako:
Wskaźnik skuteczności = (Liczba zwycięskich transakcji) / (Całkowita liczba transakcji)
„Zwycięska transakcja” musi być zdefiniowana w spójny sposób. Na przykład niektórzy liczą zwycięstwo tylko wtedy, gdy pozycja zamyka się powyżej punktu wejścia po uwzględnieniu wszystkich opłat; inni liczą zwycięstwo, jeśli cena kiedykolwiek poruszyła się na korzyść. Te wybory zmieniają liczbę, nawet jeśli logika strategii pozostaje niezmieniona.
Jak powstają częste błędy i co one powodują
1) Mylenie wskaźnika skuteczności z rentownością
Częstym nieporozumieniem jest traktowanie wyższego wskaźnika skuteczności jako bezpośredniej drogi do wyższego zysku. Wskaźnik skuteczności nie uwzględnia tego, jak duże są zyski i straty. Dwa podejścia mogą mieć ten sam wskaźnik skuteczności, ale znacznie różnić się wielkością zysku.
Przykład (z wyraźnymi założeniami): załóżmy, że Transakcja A wygrywa w 60% przypadków, osiągając średnio +1 jednostkę, gdy wygrywa, i -2 jednostki, gdy przegrywa. Transakcja B również wygrywa w 60% przypadków, osiągając średnio +2 jednostki, gdy wygrywa, i -1 jednostkę, gdy przegrywa. Wskaźnik skuteczności jest identyczny, ale oczekiwane wyniki netto mogą się różnić, ponieważ wielkości zysków i strat są różne.
2) Zmiana definicji „zwycięstwa” po zobaczeniu wyników
Innym błędem jest zmienianie zasad określających, co liczy się jako zwycięstwo. Na przykład liczenie zwycięstw tylko dla transakcji, które zostały później zamknięte, ale ignorowanie częściowych zamknięć lub korekt; lub oznaczanie zwycięstw na podstawie „kierunkowego” ruchu, a nie końcowego wyniku netto. Może to sprawić, że wskaźnik skuteczności będzie wyglądał lepiej, podczas gdy podstawowe rozliczanie wyników stanie się niespójne.
Neutralna kontrola polega na zapisaniu dokładnego warunku zwycięstwa, którego użyłeś (zamknięcie do zamknięcia, uwzględnienie opłat, obsługa częściowych wyjść), a następnie zastosowaniu go w ten sam sposób do każdej transakcji.
3) Mieszanie próbek, które nie są porównywalne
Wskaźnik skuteczności jest wrażliwy na to, co jest uwzględnione. Typowe pomyłki obejmują:
- Łączenie różnych reżimów rynkowych (okresy spokojne vs. zmienne).
- Łączenie różnych instrumentów lub sesji.
- Mieszanie transakcji ręcznych i automatycznych.
- Uwzględnianie transakcji o różnych czasach utrzymywania pozycji.
Jeśli je wymieszasz, wskaźnik skuteczności stanie się średnią różnych zachowań i możesz błędnie przypisać wzorzec jednemu reżimowi.
4) Ignorowanie kosztów i efektów wykonania
Nawet jeśli wskaźnik skuteczności jest obliczony poprawnie, rzeczywiste wyniki mogą być dotknięte kosztami i wykonaniem: spreadami, prowizjami, poślizgiem i opóźnieniami. Ludzie często obliczają wskaźnik skuteczności na podstawie uproszczonych ruchów cen bez odwzorowywania rzeczywistej ekonomiki realizacji zleceń.
Neutralna kontrola: upewnij się, że Twoja klasyfikacja „zwycięskich” i „przegranych” opiera się na tej samej definicji wyniku netto, której użyłbyś dla realistycznego zapisu (w tym kosztów, które możesz uzasadnić jako założenia).
5) Dopasowywanie do historycznego wskaźnika skuteczności (overfitting)
Wskaźnik skuteczności może wyglądać na stabilny z perspektywy czasu, ale może nie pozostać stabilny. Rynki i warunki wykonania nie gwarantują takiego samego zachowania. Strategia, która wygląda dobrze tylko pod względem wskaźnika skuteczności, może zawieść, gdy warunki się zmienią, ponieważ wskaźnik skuteczności jest tylko jednym wymiarem wyników.
Istotne ograniczenie: zależności historyczne nie przesądzają o przyszłych wynikach.
Ograniczenia, ryzyka i tryby awarii, które należy uwzględnić
- Wskaźnik skuteczności może ukrywać ryzyko ogona: mała liczba dużych strat może zdominować wyniki netto.
- Błąd próbkowania: jeśli rejestrujesz tylko określone okresy, wskaźnik skuteczności może być systematycznie mylący.
- Niestacjonarność: zmieniająca się zmienność, płynność lub wykonanie mogą zmienić to, co w praktyce oznacza „zwycięstwo”.
- Niespójność księgowa: jakakolwiek rozbieżność w definiowaniu zysków/strat, w tym częściowych wyjść lub kosztów, zmienia statystykę.
Te tryby awarii nie oznaczają, że wskaźnik skuteczności jest bezużyteczny; oznaczają, że należy go traktować jako metrykę częściową.
Weryfikacja: neutralny sposób sprawdzenia wskaźnika skuteczności
Użyj prostego samobadania:
- Zdefiniuj warunek zwycięstwa w jednym zdaniu (co czyni transakcję zwycięską i czy jest to wartość netto po uwzględnieniu zakładanych kosztów?).
- Określ zasady próbkowania (zakres dat, instrumenty, metoda wykonania i czy liczone są częściowe wyjścia).
- Przelicz wskaźnik skuteczności z tego samego zbioru danych, używając tych zasad.
- Powiąż z rachunkowością netto, łącząc wskaźnik skuteczności z szacunkiem średniego zysku i średniej straty (nawet jeśli tylko przybliżonym), a następnie zapytaj, czy wyniki netto są zgodne z bilansem zysków/strat.
Jeśli różne przeliczenia dają znacząco różne wskaźniki skuteczności, „błąd” jest prawdopodobnie związany z definicją lub próbkowaniem, a nie z samą koncepcją.