Vai al contenuto
Caso d'Uso AI Sanitaria e Diagnostica

EVIDE per l'Intelligenza Artificiale Sanitaria e Diagnostica

Preservare l'evidenza osservabile al confine tra dato clinico, interpretazione automatica e conseguenza operativa.

Per strutture sanitarie, ospedali, laboratori diagnostici, produttori di dispositivi medici, sviluppatori di AI, istituti di ricerca e autorità pubbliche che valutano flussi evidenziari operativi o sperimentali.

Sezione 1

1. Perché questo conta ora

Ogni sistema di AI diagnostica potrebbe, prima o poi, trovarsi di fronte a una domanda evidenziaria.

Quando un risultato diagnostico viene contestato o sottoposto a revisione, da un paziente, da un collegio clinico o da un'autorità di vigilanza, la questione non riguarda soltanto ciò che il sistema ha prodotto. Riguarda anche ciò che può essere ricostruito in modo indipendente dopo l'evento.

L'impiego dell'intelligenza artificiale nella diagnostica sanitaria offre opportunità importanti, ma introduce un problema in un punto preciso: il momento in cui il sistema interpreta un contenuto ricevuto, come un referto, un'immagine diagnostica, un dato clinico strutturato, un risultato di laboratorio o un dato generato da sensori. In base alla funzione dichiarata, ci si può attendere che il sistema distingua, per esempio, un dato clinico da un'istruzione operativa e un'informazione ordinaria da una possibile manipolazione.

Le tempistiche normative possono essere prevedibili. Gli incidenti non sempre lo sono.

Un incidente che avviene prima che sia stata definita una procedura evidenziaria non perde per questo il proprio significato. Può semplicemente lasciare a disposizione meno elementi preservati in modo indipendente per una ricostruzione successiva.

Sezione 2

2. Perché il confine evidenziario conta in sanità

In ambito sanitario, la distinzione tra dato clinico, istruzione, metadato e contenuto esterno può incidere direttamente su classificazioni, priorità, escalation, referti e raccomandazioni. Lo stesso contenuto può presentare:

Questo è uno dei punti nei quali un'anomalia, se non osservata o preservata, può diventare parzialmente o del tutto non ricostruibile.

Sezione 3

3. Il rischio non si esaurisce nella cybersecurity tradizionale

La cybersecurity protegge sistemi, reti e accessi. Ma un evento può riguardare anche il modo in cui un sistema di AI interpreta contenuti formalmente accessibili e legittimi. Vanno tenute distinte tre forme di preoccupazione:

Nell'insieme di queste forme, le situazioni che destano preoccupazione comprendono:

Si tratta di scenari di rischio, non dell'affermazione che tali eventi si siano verificati in una determinata struttura o tecnologia. Quale di queste forme si applichi in un caso specifico non è determinato da EVIDE.

Il dominio è ampio: immagini diagnostiche, dati clinici strutturati, risultati di laboratorio, dati generati da sensori, sistemi di triage, sistemi di telemedicina, dispositivi medici che integrano componenti di AI e sistemi che producono classificazioni, priorità, raccomandazioni o escalation, non soltanto referti testuali.

Sezione 4

4. Superfici visibili all'uomo e superfici visibili alla macchina

Uno stesso contenuto può presentare almeno cinque condizioni distinte:

La classificazione di una superficie come visibile all'uomo o visibile alla macchina può essere dichiarata dal sistema o dal partecipante e, dove possibile, sostenuta da artefatti tecnici. EVIDE preserva questa distinzione e il suo livello di supporto, senza presumere che la visibilità interna sia stata verificata in modo indipendente.

Questa distinzione si collega direttamente alle declared visibility surfaces già previste dall'architettura EVIDE.

Sezione 5

5. Il confine interpretativo osservabile

EVIDE non preserva la catena di ragionamento interno del modello. Preserva il confine osservabile nel quale una classificazione dichiarata, una condizione sostenuta da artefatti o un altro segnale osservabile dall'esterno è stato associato a un'azione, un blocco, un'escalation o un risultato.

In base alla funzione dichiarata, ci si può attendere che il sistema distingua, per esempio, dato clinico da istruzione, informazione da comando, contenuto attendibile da contenuto non verificato, risultato diagnostico da indicazione operativa ed elaborazione ordinaria da una condizione che richiede escalation.

Dove ci si aspetta che il sistema tracci tali distinzioni, esse possono costituire un vero e proprio confine evidenziario.

Sezione 6

6. Instruction Conflict Signature — ICS

Una Instruction Conflict Signature è un concetto evidenziario proposto, attualmente in valutazione all'interno del framework EVIDE.

Descrive un insieme candidato di segnali osservabili associati a un possibile conflitto tra il compito dichiarato (declared task scope) e istruzioni presenti in una fonte esterna. Segnali possibili:

La presenza di una Instruction Conflict Signature può costituire un candidato a trigger evidenziario. Non è prova di un attacco, di un errore, di intenzione malevola, di danno clinico, di causalità o di responsabilità.

Una ICS non è uno standard clinico, né una funzione validata, né una capacità già implementata automaticamente nella piattaforma.

Sezione 7

7. Quando un intake EVIDE può essere attivato

La presenza dichiarata o osservata di una ICS non attiva necessariamente un intake. Può soddisfare una condizione di materialità evidenziaria definita in precedenza e, secondo lo scope applicabile, portare alla proposta o all'attivazione di un checkpoint evidenziario. Non segue una sequenza deterministica del tipo "ICS rilevata → intake automatico obbligatorio".

Condizioni che possono essere rilevanti:

Sezione 8

8. Cosa può preservare l'intake

I campi seguenti costituiscono un candidato Minimum Evidentiary Set, da testare e affinare per il sistema, il confine e lo scope sperimentale definiti. Non sono uno schema universale già stabilito:

  1. identificativo dell'evento;
  2. sorgente e provenienza dichiarate;
  3. origine dichiarata dell'artefatto referenziato;
  4. percorso di trasferimento dichiarato;
  5. timestamp di ricezione;
  6. timestamp di preservazione;
  7. digest dell'artefatto;
  8. condizione di custodia al confine dell'intake;
  9. rappresentazione effettivamente ricevuta;
  10. superficie di visibilità dichiarata;
  11. segmento materialmente rilevante;
  12. task o obiettivo dichiarato;
  13. condizione di anomalia o di conflitto dichiarata o sostenuta da artefatti;
  14. classificazione dichiarata dal sistema;
  15. azione proposta o tentata;
  16. conseguenza operativa;
  17. intervento o conferma umana;
  18. versioni del modello, delle policy e degli strumenti;
  19. riferimenti a evidenze esterne;
  20. livello di supporto indipendente per ciascuna affermazione materiale;
  21. segnali irrisolti ed eventuale condizione non verificabile applicabile.
Un digest e un timestamp di ricezione o di preservazione non stabiliscono, da soli, autore, origine, autenticità, momento di creazione o verità del contenuto referenziato.

Sezione 9

9. Esiti osservabili e stati evidenziari

Per evitare ambiguità, non si usa "ignored" da solo, perché può assumere significati opposti. Etichette candidate di esito evidenziario per questo caso d'uso proposto potrebbero includere:

Queste etichette candidate sono presentate a scopo di valutazione e non corrispondono necessariamente a campi o stati già implementati nella piattaforma EVIDE. unresolved e unverifiable possono essere collegati a capacità EVIDE esistenti; il resto dell'elenco resta candidato.

Nessuna di queste etichette determina correttezza clinica, conformità, causalità, colpa o responsabilità.

Sezione 10

10. Cosa EVIDE non fa

EVIDE preserva

  • le condizioni osservabili nelle quali un risultato diagnostico o operativo è stato prodotto, modificato, bloccato, sottoposto a escalation o trasmesso

EVIDE non

  • formula diagnosi;
  • determina la correttezza clinica;
  • sostituisce i professionisti sanitari;
  • autorizza trattamenti o decisioni sanitarie;
  • controlla il dispositivo durante l'esecuzione;
  • sostituisce cybersecurity, safety engineering o validazione regolatoria;
  • acquisisce o certifica la catena di ragionamento interno del modello;
  • stabilisce automaticamente un attacco, un errore, una causalità, una colpa o una responsabilità.

La ricostruibilità è una condizione evidenziaria, non una determinazione clinica o di governance.

Sezione 11

11. Possibile percorso di valutazione operativa

Questo non è un percorso di integrazione clinicamente validato, né una soluzione pronta per qualsiasi ambiente sanitario. È un possibile percorso di valutazione:

  1. Identificazione del sistema e del confine
  2. Condizioni di materialità evidenziaria
  3. Selezione dei checkpoint
  4. Candidato Minimum Evidentiary Set
  5. Collegamento degli artefatti esterni
  6. Configurazione degli intake
  7. Revisione della sufficienza ricostruttiva
  8. Revisione periodica di trigger e limiti
Non viene promessa alcuna certificazione clinica, validità diagnostica, sicurezza operativa o conformità automatica.

Sezione 12

12. Percorso sperimentale nel Governance Lab

Sperimentazione controllata, inizialmente senza dati sanitari reali e con scenari sintetici, secondo la sequenza standard del Lab:

  1. Registrazione
  2. Conferma dell'identità
  3. NDA quando richiesta
  4. Scope Draft
  5. Profile Freeze lato partecipante
  6. Scope Freeze bilaterale
  7. Avvio dell'esperimento

Esperimenti possibili:

La partecipazione al Lab non costituisce approvazione, certificazione o validazione del partecipante o della tecnologia.

Sezione 13

13. Minimizzazione dei dati e test sintetici

Il test sintetico riduce l'esposizione a dati sanitari reali, ma non stabilisce di per sé validità clinica, sicurezza operativa o conformità normativa.

Sezione 14

14. Ricostruzione evidenziaria dopo un incidente

In assenza di un checkpoint evidenziario, il risultato finale può restare disponibile mentre le condizioni che lo hanno prodotto scompaiono.

Con EVIDE, la ricostruzione non deve dipendere soltanto dal referto finale: può attingere agli elementi preservati al checkpoint. Dove tali elementi sono disponibili e rientrano nello scope definito, una ricostruzione supportata da EVIDE può includere l'input ricevuto, la superficie di visibilità dichiarata, le versioni attive, la condizione di conflitto dichiarata o sostenuta da artefatti, l'intervento umano, la conseguenza operativa e i segnali irrisolti.

Sezione 15

15. Scenari illustrativi

I seguenti sono scenari illustrativi, non descrizioni di incidenti reali.

Scenario A — Un'istruzione incorporata in un referto

Un sistema riceve un referto contenente testo clinico visibile e un'istruzione incorporata non immediatamente visibile all'operatore. L'istruzione pretende di modificare la priorità del caso.

Sequenza:

  1. Contenuto ricevuto
  2. Divergenza di visibilità dichiarata o sostenuta da artefatti
  3. Candidato conflitto d'istruzione identificato
  4. Azione bloccata o sottoposta a escalation
  5. Revisione umana richiesta
  6. Artefatti e stati rilevanti ancorati
  7. Nessuna conclusione automatica su attacco, errore clinico, causalità o responsabilità

Scenario B — Un agente riceve un diniego e tenta un altro percorso

Un agente AI che svolge un compito dichiarato all'interno di una struttura sanitaria richiede l'accesso a una risorsa, che può essere un dato di un paziente, uno strumento diagnostico o un flusso clinico. Il sistema di controllo degli accessi restituisce un diniego. L'agente compie poi ulteriori tentativi e viene dichiarato che un accesso successivo è stato ottenuto attraverso un percorso diverso.

Dove i passaggi rilevanti vengono sottoposti a EVIDE nel perimetro definito, una ricostruzione può collegare:

Sequenza:

  1. Richiesta
  2. Decisione di accesso restituita (diniego)
  3. Tentativi successivi
  4. Accesso successivo attraverso un altro percorso dichiarato o sostenuto da artefatti
  5. Esito
  6. Intervento o conferma umana

Dove supportato dallo scope applicabile e dall'implementazione, i passaggi correlati possono essere collegati tramite record di intake collegati e riferimenti di catena applicabili. Il collegamento registra la relazione tra le voci; non stabilisce che una abbia causato l'altra.

Cosa questo scenario non stabilisce

  • EVIDE non concede né nega l'accesso;
  • EVIDE non blocca l'agente in tempo reale;
  • EVIDE non sostituisce identity and access management, controlli di accesso o monitoraggio della sicurezza;
  • un accesso successivo non prova elusione, illegittimità o connessione causale con il diniego precedente;
  • un percorso alternativo può essere stato legittimo;
  • l'assenza di un passaggio preservato non prova che quel passaggio non sia avvenuto;
  • EVIDE non stabilisce attacco, errore, causalità, colpa o responsabilità.

Sezione 16

16. Chi può lavorare con EVIDE

Sezione 17

17. Domande di ricerca proposte

  1. Quali confini interpretativi possiedono reale materialità evidenziaria?
  2. Quale insieme minimo consente una ricostruzione sufficiente?
  3. Chi deve definire e approvare i trigger?
  4. Come distinguere una deviazione osservabile da un giudizio clinico?
  5. Quando è necessaria la revisione umana?
  6. Come documentare ciò che resta upstream e non verificabile?
  7. Come preservare informazioni sufficienti senza una registrazione totale?
  8. Come collegare un diniego, i tentativi successivi ed eventuali accessi ottenuti attraverso un altro percorso, senza registrare i dati dei pazienti sottostanti?

Sezione 18

18. Chiusura

Possibile valutazione operativa

Per strutture e produttori interessati a valutare checkpoint, intake e sufficienza ricostruttiva in un sistema o processo definito.

Discuti un caso d'uso evidenziario ↗

Esperimento nel Governance Lab

Per organizzazioni interessate a uno studio circoscritto, synthetic-first e congelato bilateralmente prima dell'avvio.

Proponi un esperimento sintetico ↗

Contatta EVIDE Governance Lab ↗


Riferimenti