Un'ipotesi verificabile definisce dati, segnale, disponibilità, risultato e confronto. «Questa figura funziona» non è una specifica sufficiente.
Test indipendente
- Sviluppo: 2018–2021; Scelta variante: 2022; Verifica: 2023–2024
- Prima le regole, poi i risultati.
- Non cambiare regole dopo aver visto i dati di test.
Separare le fasi
Esempio ipotetico: sviluppo 2018–2021, selezione 2022, verifica unica 2023–2024. Non sono date consigliate. Dopo aver visto i risultati e modificato le regole, la verifica non è più indipendente.
Escludete casi i cui intervalli successivi attraversano il confine tra sviluppo e valutazione. Controllate sovrapposizione e futuro non disponibile.
Finestre successive
Il walk-forward sviluppa sul passato e valuta il periodo successivo con regole congelate. Fissate calendario e protocollo; mostrate tutte le finestre.
Test progressivo
- A: Sviluppo; B: Verifica
- Regole fissate
- Riutilizzare il test lo rende sviluppo.
Risultati da riportare
Confronto semplice, costi, numero di casi, dispersione e drawdown. Dichiarate quante varianti sono state provate: scegliere la migliore fra molte aumenta il rischio di adattamento casuale.
La prova fuori campione non elimina dipendenza e cambi di regime. Riferimento: Bailey e colleghi. Lo scopo è una domanda confutabile, non una promessa di profitto.