Come verificare le informazioni sulla Revisione della Strategia?

Cosa significa Revisione della Strategia (per poterla verificare)

La Revisione della Strategia è un approccio strutturato per esaminare un metodo decisionale dopo che è stato applicato, con l’obiettivo di verificare se lo scopo dichiarato e le ipotesi alla base corrispondono ancora ai risultati osservati. Ai fini della verifica, è necessario confermare tre aspetti:

1. Definizione: cosa significano “strategia” e “revisione” nel contesto specifico.
2. Meccanica: quali input vengono utilizzati, come vengono elaborati e quali output producono.
3. Evidenza: quali dati e metodo di valutazione sostengono le conclusioni.

Prima di testare qualsiasi affermazione, definisci l’ambito che intendi verificare (ad esempio, se la revisione riguarda la qualità del processo, la gestione del rischio o le statistiche dei risultati). Se un documento utilizza termini vaghi, consideralo un’area di verifica mancante piuttosto che una risposta.

Una gerarchia di fonti applicabile a qualsiasi affermazione sulla Revisione della Strategia

Parti dalle informazioni più primarie e stabili. Passa alle fonti meno dirette solo se necessario.

1. Definizioni primarie: dove l’approccio è descritto originariamente (ad esempio, la spiegazione scritta originale dell’autore). Verifica che il documento chiarisca bene termini e confini.
2. Documentazione operativa: descrizioni degli input, delle regole e dei passaggi di valutazione del metodo (ad esempio, modelli, checklist o griglie di valutazione).
3. Ambito dei dati del metodo: indicazioni su quali dati vengono utilizzati (periodo temporale, insieme di asset, regole di inclusione/esclusione).
4. Analisi indipendente: spiegazioni di terze parti che interpretano il metodo, verificabili confrontando le loro ipotesi con le meccaniche originali.
5. Affermazioni sui risultati: considerale le meno verificabili, a meno che non includano dati trasparenti, ipotesi chiare e una valutazione riproducibile.

Se un’affermazione fornisce solo dichiarazioni sui risultati senza meccaniche e ambito dei dati, puoi verificare tale limitazione: l’affermazione non è pienamente supportata dalle informazioni fornite.

Passaggi di verifica riproducibili (indipendenti e ripetibili)

Utilizza questi passaggi per verificare le informazioni sulla Revisione della Strategia senza dover dipendere da dati di mercato in tempo reale.

1. Estrai le meccaniche: descrivi il metodo in termini semplici — cosa viene misurato e come. Se esiste una formula, elenca ogni variabile.
2. Dichiara esplicitamente le ipotesi: per ogni esempio o calcolo, registra le ipotesi riguardo alla finestra temporale, ai costi (se inclusi) e al modo in cui le prestazioni vengono misurate. Se la fonte non le dichiara, segnale come sconosciute.
3. Ripeti la valutazione utilizzando lo stesso ambito: applica il metodo dichiarato allo stesso ambito di dati descritto dalla fonte. Se non riesci ad ottenere gli stessi dati, puoi comunque verificare la coerenza interna (ad esempio, se le metriche corrispondono alle definizioni).
4. Verifica l’allineamento delle metriche: assicurati che la metrica di output corrisponda all’affermazione. Una revisione che riporta una statistica riassuntiva senza discutere distribuzione, drawdown o componenti legati al rischio può supportare solo affermazioni limitate.
5. Effettua un controllo di sensibilità: modifica una variabile che la fonte afferma influisca sui risultati (ad esempio, una finestra temporale diversa) e osserva se le conclusioni rimangono coerenti.

Evidenze, esempi e come interpretarli correttamente

Quando esamini le evidenze, distingui ciò che è stabile da ciò che è variabile.

• Meccaniche stabili: regole, logica di punteggio, flusso di lavoro di valutazione e definizioni. Queste possono solitamente essere verificate leggendo e riproducendo i passaggi.
• Condizioni variabili: condizioni di mercato, differenze di esecuzione, costi e vincoli specifici della giurisdizione. Questi fattori spesso alterano i risultati e rendono meno trasferibili le affermazioni sui risultati.

Una pratica comune di verifica consiste nel considerare le affermazioni basate sui risultati come condizionali: “Date queste ipotesi, sono stati osservati questi risultati”. Se una fonte omette le ipotesi, non dovresti considerare i risultati osservati come una proprietà generale del metodo di revisione della strategia.

Limitazioni e possibili errori da individuare

È ragionevole aspettarsi almeno una limitazione materiale o un possibile errore in qualsiasi processo di Revisione della Strategia:

• Ipotesi mancanti o nascoste: calcoli che dipendono da variabili non dichiarate non possono essere verificati completamente.
• Finestre temporali non coerenti: combinare periodi diversi può generare confronti fuorvianti.
• Scelta di metriche che occultano il rischio: concentrarsi sulle medie senza informazioni sui drawdown può esagerare la stabilità pratica.
• Effetti della selezione dei dati: includere solo risultati favorevoli o escludere periodi sfavorevoli riduce la verificabilità.

Inoltre, le relazioni storiche non garantiscono risultati futuri. Anche un metodo di revisione correttamente applicato può produrre conclusioni che non si mantengono in nuove condizioni.

Checklist di verifica: cosa verificare successivamente

Per spiegare con precisione e verificare in modo indipendente le informazioni sulla Revisione della Strategia, puoi utilizzare questa checklist:

• La fonte definisce chiaramente termini e confini?
• Le meccaniche sono descritte in modo sufficientemente dettagliato da poter essere riprodotte?
• Per ogni esempio, sono dichiarate le ipotesi e l’ambito dei dati?