Controlli operativi: guida pratica ISO 42001 con esempi
Come Azienda Italiana S.p.A. pianifica, attua e controlla i processi dell'AIMS su chatbot e screening CV: criteri operativi, gestione delle modifiche, processi esternalizzati e misura dell'efficacia.
Cosa prevede il punto 8.1
Questa guida pratica alla ISO 42001 spiega con esempi come attuare il punto 8.1: pianificare, attuare e controllare i processi del sistema di gestione per l'intelligenza artificiale. Vedremo come Azienda Italiana S.p.A. trasforma i criteri definiti in pianificazione in attività quotidiane, con soglie numeriche, approvazioni tracciate ed evidenze raccolte a ogni rilascio del chatbot di assistenza clienti.
Il punto 8.1 non chiede di riprogettare il sistema: chiede di farlo funzionare. I controlli operativi individuati nel piano di trattamento devono diventare gate automatici, revisioni umane e monitoraggi continui. Le modifiche pianificate seguono un flusso di change request con valutazione d'impatto; quelle involontarie, come la deriva dei dati, vengono rilevate e riesaminate nelle conseguenze entro tempi definiti, così che il sistema resti conforme anche quando cambia da solo.
Completano il quadro i processi esternalizzati, che restano sotto il controllo del titolare dell'AIMS tramite clausole contrattuali, SLA e verifiche periodiche, e la misura dell'efficacia dei controlli tramite KPI mensili. Questa guida pratica fornisce un documento di esempio, una matrice dei controlli operativi e le risposte pronte per l'audit di certificazione.
In sintesi, la norma vuole vedere:
- Pianificazione documentata dei processi AIMS
- Criteri operativi definiti e applicati
- Controlli di 6.1.3 attuati in pratica
- Gestione modifiche pianificate e impreviste
- Controllo dei processi esternalizzati
Esempio di controllo tecnico per il punto 8.1
Un primo esempio di controllo operativo è il gate di rilascio nella pipeline CI/CD del chatbot: ogni nuova versione del modello viene bloccata automaticamente se non supera i test di non regressione su un dataset di riferimento, con accuratezza minima del 92% e assenza di risposte fuori dominio. Solo dopo l'approvazione registrata dell'AI Manager il deploy va in produzione, e il report di rilascio resta archiviato come evidenza.
Controllo tecnico collegato: il monitoraggio della deriva. Un job schedulato confronta ogni notte la distribuzione delle domande e delle risposte del chatbot con la baseline del trimestre: se la deviazione sui KPI chiave supera il 3%, scatta un alert che attiva la procedura di rollback e una rianalisi delle conseguenze della modifica involontaria entro 48 ore, come previsto dal punto 8.1.
Matrice dei controlli operativi del punto 8.1
| Elemento | Requisito operativo | Esempio applicato |
|---|---|---|
| Pianificazione processi | Criteri e risorse definiti prima dell'esecuzione | Piano OPS-AI-01 approvato a inizio anno |
| Attuazione controlli 6.1.3 | Controlli del piano di trattamento resi operativi | Gate di rilascio sull'accuratezza del chatbot |
| Modifiche pianificate | Impatto valutato prima del cambiamento | Change request con test di regressione |
| Modifiche involontarie | Conseguenze riesaminate dopo l'evento | Analisi del drift entro 48 ore dall'alert |
| Processi esternalizzati | Controllo mantenuto dal titolare dell'AIMS | SLA e audit trimestrale sul fornitore |
Nota: l'efficacia dei controlli operativi va misurata con KPI periodici e alimenta il riesame di direzione (punto 9.3).
Cosa scriverebbe "Azienda Italiana S.p.A." sul punto 8.1
Estratto del piano operativo con cui Azienda Italiana S.p.A. governa l'esecuzione dei processi dell'AIMS: criteri, controlli e responsabilità per chatbot assistenza clienti e screening CV.
Piano operativo per i processi dell'AIMS
Metodo
Criteri da 6.1.3 → procedure operative → esecuzione con evidenze → monitoraggio KPI → gestione modifiche → riesame trimestrale.
Estratto
| Processo | Criterio operativo | Controllo applicato | Evidenza |
|---|---|---|---|
| Chatbot assistenza clienti | Accuratezza ≥ 92% sul test set | Gate CI/CD con blocco automatico | Report di rilascio |
| Screening CV | Falsi positivi ≤ 5% | Revisione umana del 10% dei casi | Log delle revisioni |
| Modifica del modello | Impatto valutato prima del deploy | Change request approvata | Ticket MOD-AI-02 |
| Deriva dei dati | Deviazione ≤ 3% sui KPI chiave | Monitoraggio continuo con alert | Dashboard mensile |
| API del fornitore | Uptime ≥ 99,5% e rispetto SLA | Verifica trimestrale del servizio | Verbale FOR-AI-04 |
Ruoli e responsabilità
| Ruolo | Responsabilità |
|---|---|
| Direzione Generale | Approva piano operativo e risorse |
| AI Manager | Definisce i criteri e supervisiona l'esecuzione |
| ML Engineer | Attua i controlli tecnici e raccoglie le evidenze |
| Qualità | Verifica i KPI e prepara gli audit interni |
Checklist operativa
| Attività | Frequenza |
|---|---|
| Verifica gate di rilascio e report | A ogni deploy |
| Riesame dei KPI operativi | Mensile |
| Verifica modifiche e rollback | Trimestrale |
| Aggiornamento del piano operativo | Semestrale |
Esito
Processi sotto controllo; evidenze pronte per audit interno e riesame di direzione.
Le domande dell'audit interno sul punto 8.1
Domande di audit interno su questo punto, con risposte coerenti ed evidenze.
I consigli del Dott. Valerio Bellini sul punto 8.1
Dott. Valerio Bellini
«Non replicate il manuale nelle procedure: il punto 8.1 premia processi snelli, con criteri misurabili ed evidenze generate automaticamente dai sistemi, non faldoni di carta.»
«L'auditor chiederà di vedere un processo dal vivo: seguirà una modifica o un rilascio e verificherà che criteri, approvazioni e registrazioni coincidano con quanto dichiarato.»
Gli errori più comuni che incontro:
- Solo pianificazione, nessuna evidenza: Procedure scritte ma mai eseguite in pratica.
- Modifiche non tracciate: Fix urgenti in produzione senza valutazione d'impatto.
- Fornitori fuori controllo: API esterne del modello mai verificate né monitorate.
- Criteri operativi vaghi: Soglie non numeriche: conformità non dimostrabile.
- Deriva ignorata: Nessun monitoraggio delle modifiche involontarie.