Quali Rischi Sono Associati al Processo di Revisione?

Risposta diretta

Il processo di revisione è un metodo per esaminare azioni, risultati e processi decisionali passati al fine di migliorare quelli futuri. I principali rischi sono operativi (come viene condotta la revisione), legati al mercato (come le condizioni mutevoli influenzano i risultati), di controparte (come si comportano i fornitori o le sedi di esecuzione) e di interpretazione (come persone e sistemi interpretano le evidenze).

Meccanismo e definizione

Un processo di revisione tipicamente utilizza input come timestamp delle decisioni, prezzi registrati, dettagli degli ordini, risultati di esecuzione e la motivazione o le regole che si afferma di aver seguito. Poi confronta ciò che è accaduto con aspettative o criteri predefiniti. Infine, produce conclusioni come “cosa ha funzionato”, “cosa non ha funzionato” e “cosa cambiare”.

Questo flusso di lavoro crea diverse aree di rischio:

• Rischio operativo: la revisione può fallire se i dati sono incompleti, i criteri cambiano nel tempo o il processo non viene applicato in modo coerente.
• Rischio di mercato: anche se la meccanica è corretta, i risultati possono cambiare a causa di volatilità, liquidità e costi di transazione variabili.
• Rischio di controparte: la qualità dell’esecuzione e l’applicazione delle policy dipendono dalla piattaforma, dalla sede e da eventuali intermediari.
• Rischio di interpretazione: lo stesso dataset può portare a conclusioni diverse in base ad assunzioni e bias cognitivi.

Evidenza o esempio (con assunzioni)

Supponiamo di rivedere una serie di operazioni in due settimane diverse.

• La settimana A presenta spread più stretti e oscillazioni intraday più basse.
• La settimana B presenta spread più ampi e movimenti di prezzo più rapidi.

Se la revisione si concentra sul profitto/perdita grezzo senza adeguare costi e condizioni mutevoli, la conclusione potrebbe riflettere principalmente l’ambiente di mercato piuttosto che la qualità delle decisioni. Questo è un sovrapporsi di rischio di mercato e di interpretazione.

Il rischio operativo può manifestarsi quando alcuni ordini vengono rivisti utilizzando campi diversi (ad esempio, utilizzando i prezzi richiesti invece dei prezzi effettivamente eseguiti). In tal caso, il “tasso di errore” calcolato non è una misurazione reale della performance, poiché misura scelte di registrazione.

Il rischio di controparte può emergere quando i risultati di esecuzione differiscono da quelli attesi nel dataset storico, ad esempio quando ritardi o esecuzioni parziali alterano i risultati effettivi. Anche con le stesse regole di strategia, i risultati possono differire.

Limitazioni e rischi da considerare

Un possibile punto di fallimento significativo è che il processo di revisione possa trasformarsi in un ciclo autorinforzante: si notano modelli solo in sottoinsiemi che confermano le proprie convinzioni, scartando evidenze contraddittorie. Questo può portare all’overfitting, ovvero considerare variazioni casuali come segnali ripetibili.

Altre limitazioni comuni includono:

• Bias di conferma: si potrebbe dare maggiore peso a spiegazioni che rendono la revisione “coerente”.
• Bias di sopravvivenza: se si esaminano solo i casi che si sono conclusi normalmente, si potrebbero perdere i fallimenti.
• Standard di valutazione incoerenti: cambiare cosa conta come successo tra una revisione e l’altra riduce la comparabilità.
• Sensibilità a dati e costi: i risultati possono essere fortemente influenzati dai costi di transazione, dalla qualità dell’esecuzione e dalle definizioni usate nel tracciamento.

Poiché i risultati variano in base a costi, esecuzione e fattori giurisdizionali, le relazioni storiche non garantiscono risultati futuri. Inoltre, anche una revisione ben condotta non può eliminare l’incertezza; può solo strutturare ciò che si testa e come lo si valida.

Verifica e prossime domande

Per verificare affermazioni su un processo di revisione, controlla se il processo definisce chiaramente input e output, utilizza criteri coerenti nel tempo e distingue risultati effettivi da aspettative. Una domanda utile successiva è: “Quali campi esatti e assunzioni vengono utilizzati quando si confrontano risultati in diverse condizioni di mercato?”

Puoi anche chiederti se la revisione separa gli errori operativi (registrazione dati, applicazione regole, eventi mancanti) dagli effetti legati al mercato (liquidità, volatilità) e da quelli legati all’esecuzione (qualità del fill, tempistiche). Questa separazione è fondamentale per ridurre sia il rischio di interpretazione che quello di controparte.