Un pilota funziona se produce risultati accettabili sul perimetro concordato e migliora il lavoro senza nascondere errori o trasferirlo ai revisori. Confronta casi simili prima e durante la prova, includi supervisione ed eccezioni e concorda in anticipo quali evidenze permettono di continuare, correggere o fermare il progetto.
Decidi prima quale domanda deve risolvere il pilota
«La demo è convincente» e «il processo funziona per noi» sono conclusioni diverse. Una prova può dimostrare che un passaggio è tecnicamente possibile senza dire quanto lavoro resta al team o come vengono trattati i casi difficili. Scrivi la decisione che vuoi prendere: proseguire sullo stesso incarico, correggere una parte del flusso oppure sospenderlo.
Definisci prima cosa conta come pratica completata correttamente: output previsto, fonti disponibili, revisioni concluse e stato finale confermato. Un elemento elaborato dal software non è automaticamente una consegna accettata. Concorda anche chi valuta gli esiti, scegliendo una persona che conosca il lavoro e possa contestare il risultato.
Documentare casi di prova, metriche e strumenti di verifica è coerente con MEASURE 2.1 del NIST AI RMF 1.0. La scheda seguente è una proposta operativa, non un test di certificazione.
Costruisci una baseline che renda il confronto leale
Osserva il processo attuale sullo stesso inizio e sulla stessa fine che userai nella prova. Registra quantità, tipologia e complessità dei casi: una settimana di richieste standard non rappresenta un periodo con contestazioni e documenti incompleti. Se non puoi mantenere lo stesso mix, separa i gruppi e spiega la differenza invece di confrontare soltanto due medie.
Tieni distinti il tempo di lavorazione della persona, il tempo trascorso in attesa e la durata complessiva dalla richiesta alla consegna. Una pratica può richiedere pochi minuti di lavoro e restare ferma per giorni perché manca una fonte. Ridurre il primo dato non dimostra che sia migliorato anche il secondo.
Per gli output accettati, usa lo stesso criterio e lo stesso momento di osservazione. Rendi visibili pratiche ancora aperte, casi esclusi e correzioni successive. Un denominatore formato soltanto dai casi riusciti nasconde il lavoro rimasto indietro. La guida alla preparazione del primo progetto aiuta a definire questo perimetro prima di raccogliere numeri.
La scheda di misura: dato, responsabile e decisione
Completa i criteri con il responsabile prima della prova. Le indicazioni sotto descrivono come decidere; non prescrivono soglie universali. Specifica quali errori impediscono di continuare anche quando il tempo medio migliora.
Scorri la tabella in orizzontale per leggere tutte le colonne.
| Metrica | Fonte e responsabile | Continuare, correggere o fermare |
|---|---|---|
| Quantità e complessità | Elenco dei casi entrati, esclusi e aperti, per tipologia; referente operativo. | Continua se il campione copre l’incarico. Correggi il campione se mancano varianti. Non estendere il giudizio a casi mai osservati. |
| Tempo umano totale | Rilevazione di preparazione, revisione, eccezioni e supervisione senza doppioni; coordinatore del team. | Continua se l’impegno è sostenibile e coerente con l’obiettivo. Correggi il passaggio che trasferisce troppo lavoro ai revisori. |
| Attesa e durata complessiva | Orari di ingresso, blocco, ripresa e accettazione; responsabile del processo. | Correggi le attese senza proprietario. Ferma il tratto interessato se un blocco viene nascosto come lavoro concluso. |
| Accettazione al primo controllo | Esito della prima revisione e motivi di rifiuto; revisore della funzione. | Confronta con il criterio concordato. Se non è rispettato, correggi prima di ampliare il perimetro. |
| Errori e rilavorazioni | Registro delle correzioni, gravità e tempo necessario; responsabile qualità del processo. | Correggi difetti ripetibili e verifica di nuovo. Sospendi per gli errori critici definiti nel piano, anche se rari. |
| Interventi umani | Numero, motivo ed esito delle richieste di intervento; referente delle eccezioni. | Distingui interventi previsti da guasti. Se la coda non ha una presa in carico sostenibile, correggi o riduci l’incarico. |
| Costo per pratica accettata | Costi del perimetro e numero di pratiche accettate nello stesso periodo; Finance con il process owner. | Continua solo con un confronto completo. Se mancano costi o casi aperti, correggi il calcolo prima della decisione economica. |
Un esempio: il lavoro più veloce può richiedere più revisione
I numeri seguenti sono inventati per spiegare il calcolo, non risultati Digital Employee. Considera due insiemi comparabili di 100 pratiche ciascuno, entrambi con 80 casi ordinari e 20 con eccezioni. Tutte le 100 pratiche di ciascun insieme sono state accettate dopo le eventuali correzioni; i tempi umani sono conteggiati una sola volta.
Scorri la tabella in orizzontale per leggere tutte le colonne.
| Attività | Baseline | Pilota |
|---|---|---|
| Preparazione manuale residua | 600 minuti | 100 minuti |
| Revisione degli output | 200 minuti | 250 minuti |
| Correzioni ed eccezioni | 100 minuti | 150 minuti |
| Controllo specifico del flusso delegato | 0 minuti | 100 minuti |
| Totale operativo | 900 minuti | 600 minuti |
La differenza operativa osservata è 900 − 600 = 300 minuti, cioè 5 ore, pari a 9 contro 6 minuti umani per pratica accettata. Guardare soltanto la preparazione avrebbe attribuito al progetto 500 minuti, ignorando l’aumento di revisione e gli altri interventi.
Supponi inoltre 180 minuti una tantum del team per preparare e verificare il pilota: l’impegno umano totale della prova diventa 600 + 180 = 780 minuti. Nel periodo osservato la differenza rispetto alla baseline è quindi 120 minuti, cioè 2 ore. Tieni questa preparazione separata nel resoconto, senza farla sparire né replicarla automaticamente in ogni periodo futuro.
Costo per pratica e lavoro ancora aperto
Calcola il costo per pratica accettata dividendo i costi attribuiti allo stesso perimetro e periodo per il numero di pratiche accettate. Esplicita se includi setup attribuito alla prova, canone applicabile, eventuali voci variabili previste, tempo interno valorizzato e costi di terzi necessari. Non contare due volte una voce già inclusa e mostra anche il totale prima di dividerlo.
Le pratiche aperte hanno già assorbito risorse: riportale accanto al dato unitario. Se i periodi non sono confrontabili, il numero è provvisorio. Per le componenti del preventivo rimanda alla guida sui costi del servizio; qui la domanda è quale costo accompagni un risultato effettivamente accettato. Ore disponibili per altro lavoro e minori uscite di cassa restano risultati diversi.
Chiudi la prova con una decisione motivata
Prepara una pagina con perimetro, baseline, risultati, casi aperti e limiti del confronto. Per ogni problema scegli un’azione: proseguire entro lo stesso confine, correggere e ripetere la verifica oppure sospendere il tratto interessato. La guida ai controlli operativi aiuta a definire chi può autorizzare ripartenza e ampliamento.
La descrizione del servizio include prove e osservazione del lavoro svolto; modalità, dati accessibili e criteri di un eventuale pilota vanno concordati. Un buon esito sul campione sostiene quella decisione circoscritta: non dimostra un beneficio per tutti i reparti o in ogni mese.