Passo per passo
Come nasce un numero
- 1Raccolta dello storico ufficiale ADM: estrazioni complete, pulite e versionate.
- 2Feature engineering: ritardi, frequenze, relazioni ciclometriche e altri indicatori descrittivi.
- 3Modello ML calibrato: addestrato sul passato e tarato perché la confidenza dichiarata corrisponda alla frequenza reale.
- 4Confidenza + backtest: ogni suggerimento esce con uno score calibrato, validato walk-forward senza lookahead.
Calibrazione
Cosa significa 'calibrato'
Un modello è calibrato quando la confidenza che dichiara corrisponde alla frequenza con cui ha ragione: se assegna confidenza 0,7 a un gruppo di previsioni, circa il 70% di quelle previsioni dovrebbe rivelarsi corretta. Misuriamo questo scarto con l’ECE (Expected Calibration Error): più è basso, più la confidenza è affidabile.
Usiamo inoltre la conformal prediction (MAPIE) per costruire intervalli con una copertura dichiarata: a coverage 90% gli intervalli contengono l’esito reale nel 90% dei casi sullo storico. È un modo onesto per dire quanto fidarsi, senza promettere il singolo risultato.
Reliability diagram illustrativo: più i punti seguono la diagonale, più il modello è calibrato.
ECE e conformal prediction, in breve
L'ECE (Expected Calibration Error) raggruppa le previsioni per livello di confidenza e, in ogni gruppo, confronta la confidenza media dichiarata con la frequenza di successo osservata. La media pesata di questi scarti è l'ECE: più è vicino a zero, più la confidenza è affidabile.
La conformal prediction (MAPIE) non promette un singolo numero: costruisce intervalli con una copertura garantita sullo storico (es. coverage 90% = l'esito reale cade nell'intervallo nel 90% dei casi). È un modo onesto per quantificare l'incertezza invece di nasconderla.
Tre livelli
Alta, Media, Bassa — leggibili a colpo d'occhio
- Alta: pattern consistente su lungo periodo
- Media: segnale rilevato ma con varianza
- Bassa: indizio debole, da valutare con cautela
- Mai presentato come probabilità di vincita
Cosa NON è lo score
È una misura di consistenza del pattern individuato, non una probabilità di vincita. Una confidenza alta non garantisce l’esito: indica solo che il pattern è solido rispetto allo storico. Il futuro resta incerto e il valore atteso (EV) del gioco negativo.