Capitolo 12 - Protocollo scientifico OCT: metrica, osservazione, decisione
Metadati:
- Versione: v1.0
- Data: 2026-04-22
- Stato: draft completo
- Autore: Fabio Ghioni
- Allineato a: TE_CORE v5.1 / OST v2.1 / OCT baseline v1.0 candidate
- Target parole capitolo: 2.700
1. Problema
Con i capitoli precedenti abbiamo costruito un impianto teorico completo:
- fondazione ontologica e assiomatica;
- teoremi fondativi, differenziali e applicativi;
- estensione del corpus classico fino alle strutture avanzate;
- grammatica di controesempi, limiti e falsificabilità.
Manca però il passaggio che decide se la teoria può diventare pratica scientifica condivisa: un protocollo unico che dica come osservare, cosa misurare e quando decidere.
Senza protocollo:
- i risultati restano locali e difficili da confrontare;
- le decisioni di validazione diventano opache;
- i passaggi
in_proof -> validatedrischiano arbitrarietà.
Con protocollo:
- ogni test diventa replicabile;
- ogni decisione è tracciabile;
- la teoria può essere auditata da team indipendenti.
Il problema del capitolo è quindi:
come formalizzare una procedura standard che unisca metrica ordinativa, osservazione contestuale e decisione epistemica senza ridurre OCT a sola statistica né a sola deduzione formale?
1.1 Perché questo capitolo apre la milestone v1.4
La milestone v1.4 è il passaggio da “teoria estesa” a “metodo scientifico operativo”:
- Capitolo 12: protocollo;
- Capitolo 13: benchmark e replicabilità;
- Capitolo 14: governance epistemica.
Il Capitolo 12 è la base perché definisce il linguaggio procedurale comune usato nei due capitoli successivi.
1.2 Vincolo metodologico
Il protocollo OCT deve mantenere una tripla coerenza:
- coerenza matematica (con O1-O7 e i teoremi F/D/A);
- coerenza sperimentale (misure replicabili);
- coerenza decisionale (regole esplicite di accettazione/revisione/rigetto).
2. Tesi del capitolo
La tesi è articolata in nove enunciati.
- Un risultato OCT è scientificamente forte solo se combina prova formale e protocollo di osservazione replicabile.
- La triade metrica canonica (
Coh,Phi,Delta) è necessaria ma non sufficiente: servono metriche ausiliarie dominio-specifiche. - Ogni esperimento deve essere indicizzato da un contesto
Omegadichiarato e versionato. - La pre-registrazione dei criteri decisionali riduce bias di conferma.
- La validazione richiede benchmark indipendenti e multi-contesto.
- I criteri di decisione devono distinguere
validated,revise,reject. - Il protocollo deve prevedere pubblicazione di fallimenti significativi, non solo esiti positivi.
- Il passaggio di stato di un teorema è legittimo solo con evidenza tracciata.
- Il protocollo proposto è sufficiente per sostenere il disegno benchmark del Capitolo 13.
3. Definizioni canoniche
Definizione 12.1 (Unità di validazione)
Unità minima di validazione:
U_val := <Claim, Omega, Dataset, Pipeline, Metriche, Criteri, Log, Esito>.
Definizione 12.2 (Contesto osservativo registrato)
Omega_reg è il contesto osservativo con:
- variabili rilevanti;
- ipotesi di dominio;
- condizioni di perturbazione ammesse;
- versione del protocollo.
Definizione 12.3 (Metriche canoniche e ausiliarie)
Metriche canoniche:
Coh_Omega(D) in [0,1];Phi_Omega(D)(normalizzata quando necessario);Delta_Omega(D)=1-Coh_Omega(D).
Metriche ausiliarie (esempi):
Err_semper qualità semantica;Err_structper fedeltà strutturale;Var_Omegaper stabilità cross-contesto.
Definizione 12.4 (Pre-registrazione)
La pre-registrazione è la dichiarazione ex ante di:
- criteri di conferma;
- criteri di falsificazione;
- soglie e test statistici;
- regole di decisione.
Definizione 12.5 (Decisione epistemica)
Esito finale di un test:
validated: evidenza sufficiente e replicata;revise: evidenza mista o insufficiente;reject: controevidenza robusta nel dominio dichiarato.
Definizione 12.6 (Tracciabilità completa)
Un risultato è tracciabile se include:
- configurazione di esecuzione;
- dati/versione;
- codice o procedura;
- output e log;
- motivazione della decisione.
Definizione 12.7 (Indice di evidenza composta)
Dato un claim C e un contesto Omega, definiamo l'indice di evidenza composta:
IEC(C,Omega) := w1*Coh + w2*Phi_norm + w3*(1-Delta) + w4*Rep + w5*Trace
con:
w_i >= 0esum_i w_i = 1;Phi_normnormalizzata nel dominio del benchmark;Repindice di replicabilità inter-benchmark;Traceindice di completezza di tracciabilità.
L'IEC non sostituisce la valutazione teorica, ma fornisce una sintesi comparabile tra esperimenti.
Definizione 12.8 (Budget d'incertezza)
Per ogni unità U_val definiamo un budget d'incertezza:
B_unc := <u_data, u_model, u_measure, u_context, u_decision>
dove ogni termine quantifica la componente di incertezza legata a:
- qualità e copertura dei dati;
- specificazione del modello/pipeline;
- errore o variabilità di misura;
- trasferibilità tra contesti;
- discrezionalità residua in decisione.
Un claim non può essere promosso a validated se B_unc supera la soglia preregistrata.
4. Sviluppo formale
4.1 Architettura del protocollo in tre strati
Il protocollo OCT è organizzato in tre strati:
- Strato Metrico: cosa misurare (
Coh/Phi/Delta+ ausiliarie); - Strato Osservativo: in quale
Omegae con quali perturbazioni; - Strato Decisionale: come passare da misura a stato teorico.
La separazione evita confusioni:
- buone metriche con cattivo contesto;
- buon contesto con regole decisionali opache;
- decisioni forti su evidenza debole.
4.2 Pipeline minima di validazione (PV-8)
Proponiamo una pipeline in otto passi.
- dichiarare claim e teorema target;
- registrare
Omega_reg; - fissare dataset/versione e baseline;
- pre-registrare criteri di conferma/falsificazione;
- eseguire esperimento e raccogliere metriche;
- ripetere su benchmark indipendente;
- consolidare risultati multi-contesto;
- assegnare esito (
validated/revise/reject) con motivazione.
La PV-8 è il nucleo operativo del capitolo.
4.3 Regole di evidenza minima
Per promuovere un claim a validated proponiamo quattro condizioni minime:
- conferma su almeno due benchmark indipendenti;
- replicazione su almeno due contesti
Omeganon equivalenti banalmente; - coerenza tra metrica canonica e metrica ausiliaria rilevante;
- assenza di controesempio forte non risolto nel dominio dichiarato.
Se una condizione manca:
- default su
revise(non suvalidated).
4.4 Trattamento dei risultati discordanti
È frequente ottenere risultati misti tra benchmark o contesti. In OCT non si risolve con media semplice.
Regola proposta:
- identificare la fonte di divergenza (dati, mapping, soglia, pipeline);
- classificare divergenza come:
- rumore controllabile;
- instabilità strutturale;
- controevidenza sostanziale.
- decidere esito in funzione della classe di divergenza.
Questa regola impedisce sia ottimismo ingiustificato sia rigetto prematuro.
4.5 Matrice decisionale standard
Per ogni unità U_val:
- D-Valid: criteri soddisfatti, replicazione robusta;
- D-Revise: evidenza parziale o conflittuale;
- D-Reject: fallimento robusto nel dominio dichiarato.
Ogni decisione deve includere:
- claim colpito;
- evidenze principali;
- limiti residui;
- azione successiva.
4.6 Collegamento con la falsificabilità (Capitolo 11)
Il protocollo incorpora i principi K1-K7:
- riproducibilità e tracciabilità;
- localizzazione del fallimento;
- decisione finale non arbitraria.
In questo modo, la falsificabilità non resta solo principio teorico: diventa procedura eseguibile.
4.7 Controllo di qualità del protocollo
Ogni campagna sperimentale dovrebbe produrre un report QA con:
- completezza metadati;
- qualità log;
- copertura benchmark;
- coerenza tra decisione e criteri pre-registrati.
Se il QA è insufficiente:
- il risultato non può passare a
validated.
4.8 Versionamento del protocollo
Il protocollo deve essere versionato (P_v1, P_v2, ...). Ogni versione deve dichiarare:
- cosa cambia nelle metriche;
- cosa cambia nei criteri decisionali;
- quali risultati pregressi vanno rivalutati.
Questo previene inconsistenze storiche nei passaggi di stato.
4.9 Protocollo e apertura dei dati
Per quanto possibile, la validazione deve favorire:
- pubblicazione di dataset/manifest;
- pubblicazione dei log principali;
- pubblicazione degli errori significativi.
La trasparenza non è accessorio etico: è condizione tecnica di replicabilità.
4.10 Condizione di non-ridondanza del capitolo
Il capitolo è non ridondante se mostra che:
- senza protocollo la stessa teoria può produrre esiti incompatibili;
- con protocollo gli esiti diventano confrontabili e decidibili.
Questa condizione è soddisfatta dall’integrazione tra PV-8, regole di evidenza minima e matrice decisionale.
4.11 Operatore decisionale ordinativo D_OCT
Per rendere la decisione riproducibile introduciamo un operatore esplicito:
D_OCT(U_val) -> {validated, revise, reject}.
Input minimi:
- indicatori canonici e ausiliari;
- esito repliche indipendenti;
B_unceIEC;- presenza/assenza di controesempi forti.
Regola orientativa:
validatedse tutte le condizioni minime sono soddisfatte,IEC >= tau_valeB_unc <= beta_val;revisese evidenza intermedia, conflittuale o incertezza oltre soglia di validazione;rejectse controevidenza robusta o violazioni strutturali persistenti.
L'operatore non elimina il giudizio scientifico, ma ne impone la struttura argomentativa.
4.12 Budget d'incertezza e analisi di sensibilità
Ogni campagna deve includere almeno tre verifiche:
- sensibilità dati: variazione controllata del campione/stratificazione;
- sensibilità soglie: stress su
tau_val,beta_val, soglie ausiliarie; - sensibilità contesto: cambio di
Omegamantenendo claim invariato.
Se l'esito cambia in modo non spiegato rispetto a piccole perturbazioni, il claim va in revise fino a chiarimento.
4.13 Schema minimo di preregistrazione
Per evitare preregistrazioni deboli proponiamo uno schema minimo obbligatorio.
Campi obbligatori:
- claim e dominio di validità dichiarato;
- dataset, fonti, criteri di inclusione/esclusione;
- pipeline esecutiva e versioni software;
- metriche canoniche e metriche ausiliarie;
- soglie decisionali (
tau_val,tau_rev,beta_val); - test di robustezza previsti;
- criteri espliciti di falsificazione;
- politica di gestione risultati inattesi.
Senza questi campi, l'unita non e idonea a validazione conclusiva.
4.14 Livelli di riproducibilità degli artefatti
Definiamo quattro livelli progressivi:
R0- descrizione narrativa non eseguibile;R1- script disponibili ma ambiente non congelato;R2- script + ambiente + manifest dati con hash;R3- replay indipendente riuscito su infrastruttura esterna.
Per claims con impatto teorico alto, il livello minimo raccomandato e R2; per promozione critica e preferibile R3.
5. Proposizioni e teoremi locali
Proposizione 12.1 (Necessità della pre-registrazione)
Enunciato: Senza pre-registrazione dei criteri decisionali, la validazione OCT è esposta a bias di conferma non controllati.
Intuizione: la decisione ex post può essere adattata al risultato osservato.
Stato: validated.
Proposizione 12.2 (Insufficienza del benchmark singolo)
Enunciato:
Un singolo benchmark non è condizione sufficiente per promuovere un claim a validated.
Intuizione: la robustezza richiede indipendenza minima delle evidenze.
Stato: validated.
Teorema 12.3 (Sufficienza operativa della pipeline PV-8)
Ipotesi:
- esecuzione completa dei passi PV-8;
- tracciabilità completa;
- decisione conforme alla matrice standard.
Tesi: La decisione epistemica risultante è auditabile e non arbitraria.
Proof sketch:
- PV-8 rende esplicite tutte le dipendenze dell’esperimento;
- tracciabilità completa rende verificabile il processo;
- la matrice decisionale vincola la scelta finale.
Conseguenze: fornisce base operativa per passaggio di stato dei teoremi.
Stato: in_proof.
Teorema 12.4 (Compatibilità tra rigore formale e rigore sperimentale)
Ipotesi:
- claim formalmente ben specificato;
- protocollo PV-8 applicato;
- evidenza multi-benchmark coerente.
Tesi: È possibile mantenere simultaneamente rigore matematico e rigore sperimentale nel ciclo OCT.
Proof sketch:
- il formalismo definisce cosa testare;
- il protocollo definisce come testare;
- la decisione tracciata definisce quando accettare o rivedere.
Conseguenze: evita la falsa alternativa tra “teoria pura” e “solo empiria”.
Stato: in_proof.
Proposizione 12.5 (Monotonia informativa della tracciabilità)
Enunciato:
A parita di esito metrico, unita con livello di tracciabilità superiore (Trace) produce decisioni più auditabili e meno controvertibili.
Intuizione: la trasparenza riduce ambiguità interpretative e facilità la replica indipendente.
Stato: validated.
Proposizione 12.6 (Necessità del budget d'incertezza)
Enunciato:
Senza quantificazione esplicita del budget d'incertezza (B_unc), la distinzione tra revise e validated resta metodologicamente fragile.
Intuizione: la stessa metrica può apparire forte o debole a seconda della varianza nascosta non esplicitata.
Stato: in_review.
Teorema 12.7 (Consistenza procedurale dell'operatore D_OCT)
Ipotesi:
- preregistrazione completa;
- regole decisionali fissate ex ante;
- applicazione uniforme su benchmark indipendenti.
Tesi:
L'operatore D_OCT e consistente nel senso procedurale: a parita di input e regole, produce decisioni replicabili tra valutatori.
Proof sketch:
- la preregistrazione blocca il perimetro decisionale;
- la codifica degli input riduce ambiguità semantiche;
- la matrice decisionale limita la discrezionalità ex post.
Conseguenze: fornisce base per audit inter-team e comparazione temporale delle decisioni.
Stato: in_proof.
6. Implicazioni operative
6.1 Per progettazione benchmark (Capitolo 13)
Il Capitolo 13 dovrà derivare direttamente da PV-8:
- benchmark primari e secondari;
- manifest dati/versioni;
- criteri di conferma/falsificazione pre-registrati.
6.2 Per governance epistemica (Capitolo 14)
Il Capitolo 14 userà:
- matrice decisionale standard;
- regole di versionamento protocollo;
- policy di pubblicazione dei fallimenti.
6.3 Per team di ricerca multipli
Il protocollo consente collaborazione distribuita con linguaggio comune:
- stesso schema di report;
- stessi stati decisionali;
- stessa mappa di responsabilità metodologica.
6.4 Per pubblicazione tecnica
Ogni release dovrebbe includere:
- versione protocollo usata;
- claim valutati;
- esiti e motivazioni;
- limiti aperti.
Questo migliora la leggibilità esterna e riduce ambiguità interpretative.
6.5 Per continuità del manoscritto
Il protocollo funziona da “strato comune” tra teoria (capitoli 1-11) e applicazioni/benchmark (capitoli 13-16).
Senza questo strato, il libro rischierebbe frammentazione in blocchi non comunicanti.
6.6 Per pacchetto pubblicazione multi-piattaforma
Il protocollo del Capitolo 12 consente una pubblicazione coordinata su canali diversi senza perdita di significato metodologico.
Mappatura operativa consigliata:
- GitHub: versione eseguibile (documenti, script, manifest, changelog);
- Zenodo: snapshot citabile con DOI di release;
- OSF: progetto di ricerca con artefatti, preregistrazioni e versioni intermedie;
- Hugging Face: eventuali dataset mirror e card metodologiche per benchmark ripetibili.
La coerenza tra piattaforme si ottiene mantenendo identico:
- identificatore di versione del protocollo;
- manifest dei dataset con hash;
- decision table usata per
validated/revise/reject.
6.7 Per lettori non specialisti
Un protocollo esplicito e anche una funzione pedagogica: rende leggibile il passaggio da teoria ad evidenza.
Per una fruizione "a prova di bambino", ogni report dovrebbe includere:
- obiettivo in linguaggio naturale;
- cosa e stato misurato e perché;
- esito finale e motivo della scelta;
- cosa manca ancora per aumentare la confidenza.
Questo non semplifica la teoria, ma semplifica il suo accesso.
7. Limiti e non-claim
Limiti espliciti:
- il capitolo definisce un protocollo minimo, non esaustivo per tutti i domini;
- alcune metriche ausiliarie richiedono specifica per caso d’uso;
- la robustezza statistica dipende dalla qualità dei dataset disponibili.
Failure mode riconosciuti:
- pre-registrazione incompleta o retroattiva;
- benchmark non indipendenti presentati come indipendenti;
- decisioni non allineate ai criteri dichiarati;
- omissione di fallimenti significativi nei report pubblici.
Contromisure prioritarie:
- checklist di preregistrazione bloccante prima dell'esecuzione;
- revisione incrociata minima a due valutatori per la decisione finale;
- audit trimestrale dei livelli
R0-R3sugli artefatti pubblici; - registro pubblico delle revisioni che motivi ogni cambio di stato dei claim.
Box C - Non-claim
Questo capitolo non implica:
- che il protocollo garantisca automaticamente risultati positivi;
- che ogni claim in
in_proofdebba diventarevalidated; - che la standardizzazione metodologica sostituisca l’innovazione teorica.
8. Claim Ledger (S0-S3)
| ID | Claim | Tipo | Evidenza | Stato |
|---|---|---|---|---|
| C12.1 | La pipeline PV-8 è sufficiente come baseline operativa di validazione OCT | metodologico | S2 | in_review |
| C12.2 | La pre-registrazione riduce bias decisionali in modo significativo | epistemico | S1 | validated |
| C12.3 | Multi-benchmark e multi-contesto sono necessari per promozione a validated |
metodologico | S1 | validated |
| C12.4 | La matrice decisionale standard migliora tracciabilità e auditabilità | metodologico | S1 | in_review |
| C12.5 | Il protocollo unifica rigore formale e rigore sperimentale | metateorico | S2 | in_proof |
| C12.6 | La pubblicazione dei fallimenti è condizione tecnica di replicabilità | epistemico-operativo | S1 | validated |
| C12.7 | L'operatore D_OCT rende replicabile la decisione a parita di input/regole |
metodologico-formale | S2 | in_proof |
| C12.8 | Il budget d'incertezza e necessario per distinguere validazione da revisione | metodologico | S1 | in_review |
| C12.9 | I livelli R0-R3 migliorano la comparabilità di riproducibilità tra studi |
operativo | S1 | validated |
9. Bridge al Capitolo 13
Il Capitolo 12 ha definito la procedura standard di validazione:
- metrica canonica e ausiliaria;
- osservazione contestuale registrata;
- decisione epistemica tracciata.
Il Capitolo 13 tradurrà questa procedura in disegno benchmark completo:
- selezione e stratificazione dataset;
- benchmark indipendenti e replicabilità multi-dominio;
- criteri quantitativi di conferma/falsificazione per i blocchi F/D/A.
In sintesi: il Capitolo 12 definisce il metodo; il Capitolo 13 ne implementa l’infrastruttura sperimentale.
Riferimenti
Riferimenti di framework interno:
- Ghioni, F. (2026).
TE_CORE_v5.1.md. - Ghioni, F. (2026).
TE_OST_v2.1.md. OCT_VALIDATION_PROTOCOL_v0_1.md.OCT_FOUNDATIONAL_BOOK_CHAPTER_11_v1_0.md.OCT_FOUNDATIONAL_BOOK_CHAPTER_10_v1_0.md.
Riferimenti primari:
- Popper, K. (1959). The Logic of Scientific Discovery.
- Lakatos, I. (1978). The Methodology of Scientific Research Programmes.
- Nosek, B. et al. (2018). The preregistration revolution.