Vai al contenuto
Aziendale.ai

Come si misura un pilota AI, prima di deciderlo

La misura di partenza, cinque numeri da seguire, il gruppo di confronto, quando fermarsi e il rapporto finale per decidere se estendere.

In breve. Un pilota è una prova misurata su un flusso di lavoro reale, e la misura deve esistere prima dell'accensione. Senza una misura di partenza restano soltanto opinioni. Questa guida fissa cinque misure, un gruppo di confronto, i criteri per fermarsi e la struttura del rapporto finale. Vi serve per decidere con i numeri, e non con le impressioni, se estendere, cambiare o spegnere.

Scaletta

  • La misura esiste prima
  • Le cinque misure universali
  • Il gruppo di confronto
  • Quando fermarsi
  • Il rapporto di fine pilota
  • I passi del pilota misurato
  • Elenco di controllo
  • Come si parte

1. La misura esiste prima

Registrate la situazione di partenza per un periodo di due-quattro settimane, sullo stesso flusso che metterete alla prova e con le stesse definizioni che userete durante il pilota.

Se oggi non riuscite a contare le pratiche, non partite: sistemate prima il conteggio e solo dopo accendete l'assistente.

Scrivete su una pagina:

  • nome del flusso;
  • cosa conta come pratica o contatto chiuso;
  • cosa conta come errore;
  • chi raccoglie i numeri;
  • data di inizio e fine della misura di partenza.

Fate firmare la pagina. Senza una firma, qualcuno finirà per cambiare una definizione a metà strada e il confronto perderà valore.

La regola vale anche per un agente, cioè un assistente che esegue passaggi invece di limitarsi a rispondere. Prima di affidargli dei passaggi, bisogna misurare il lavoro come si svolge oggi.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Marta, responsabile di un servizio clienti in una banca regionale, conta per tre settimane le domande ripetute e i minuti medi di gestione. Solo dopo accende l'assistente su una coda limitata.

2. Le cinque misure universali

Non servono venti indicatori: bastano cinque misure, adattate al vostro flusso.

Volume trattato. Il numero di pratiche o contatti che rientrano nel perimetro del pilota.

Tempo medio di chiusura. Il tempo che passa dal primo contatto alla chiusura utile della pratica.

Quota chiusa senza intervento umano. Oppure con un intervento minimo, se decidete di definirlo.

Errori o ricontatti. Tutto ciò che torna indietro o deve essere corretto.

Soddisfazione o fatica del gruppo di lavoro. Basta una domanda semplice alla settimana, senza questionari interminabili.

Una sesta misura, facoltativa ma utile, è il costo a consumo nel periodo, che permette di leggere il rientro economico insieme alla qualità.

L'AI Act, la legge europea sull'intelligenza artificiale, e il GDPR, la legge europea sulla privacy, non sono misure del pilota. Restano però vincoli da rispettare su trasparenza, permessi e trattamento dei dati.

Definite le soglie di successo prima di cominciare, anche in linguaggio semplice: tempo medio in calo, errori non in aumento, gruppo di lavoro disposto a continuare. Poi scrivete i numeri che per voi significano «abbastanza».

3. Il gruppo di confronto

Senza un confronto non potete sapere se il miglioramento dipende dall'assistente o dalla stagione. Esistono tre modi per costruirlo, dal più semplice al più preciso.

Prima e dopo sullo stesso flusso. Si confronta la misura di partenza con il periodo del pilota, facendo attenzione ai mesi anomali.

Coda con e senza assistente. Per lo stesso tipo di richieste, una parte passa dall'assistente e l'altra no, e si confrontano i risultati.

Fasce orarie. L'assistente lavora solo in certe ore, mentre nelle altre il lavoro procede come sempre; il confronto si fa a parità di giorno della settimana.

Scegliete uno di questi modi e mantenetelo fino alla fine, senza cambiarlo a metà perché «così viene meglio».

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Paolo, che guida un'officina, affida all'assistente i messaggi del mattino e lascia quelli del pomeriggio alle persone. Per due settimane confronta tempi ed errori delle due fasce.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Sara, in uno studio di consulenza, confronta il prima e il dopo sullo stesso tipo di pratica. Dal calcolo esclude la settimana di chiusura estiva, dichiarata fin dall'inizio.

4. Quando fermarsi

Fermarsi non significa fallire, ma proteggere clienti e colleghi. Conviene fermare il pilota, o restringerlo, in questi casi:

  • gli errori salgono oltre la soglia scritta;
  • il gruppo di lavoro perde più tempo a correggere di quanto ne guadagna;
  • il consumo esplode senza beneficio;
  • emergono rischi su dati personali non previsti;
  • la persona che deve approvare non ce la fa davvero;
  • i clienti non capiscono di parlare con un assistente AI dove serve dirlo.

Stabilite in anticipo chi ha il potere di spegnere: serve una persona con nome e cognome, non un comitato lento.

Dopo lo spegnimento, il lavoro deve poter tornare al modo precedente senza danni. Se questo non è possibile, il pilota era impostato male.

5. Il rapporto di fine pilota

Alla data fissata consegnate un rapporto breve, che contenga almeno queste voci:

  1. Perimetro e date.
  2. Misura di partenza e numeri del periodo.
  3. Gruppo di confronto usato.
  4. Cosa ha funzionato.
  5. Cosa no, con esempi.
  6. Costo di costruzione e consumo nel periodo.
  7. Raccomandazione: estendere, cambiare, fermare.
  8. Condizioni per il passo successivo.
  9. Lezioni per le regole scritte e la formazione.
  10. Firma di chi ha deciso.

Allegate da tre a cinque esempi anonimi di pratiche, che mostrano la qualità del lavoro meglio di un totale.

Se la raccomandazione è estendere, indicate il nuovo perimetro e le nuove misure, evitando formule generiche come «tutta l'azienda».

Se la raccomandazione è cambiare, indicate quale parte va modificata. Se è fermare, spiegate il motivo e che cosa conservate comunque, come le regole scritte, la formazione e l'elenco dei sistemi.

I passi del pilota misurato

  1. Concordate perimetro, date e cinque misure con soglie scritte.
  2. Raccogliete la misura di partenza e firmate le definizioni.
  3. Accendete su un gruppo di confronto chiaro e limitato.
  4. Rivedete i numeri a metà periodo e alla fine, con il potere di spegnere.
  5. Consegnate il rapporto e decidete se estendere, cambiare o fermare.

Approfondimento: definire «chiusura» senza ambiguità

Se «chiuso» significa cose diverse per il servizio clienti e per l'ufficio interno, i numeri raccontano una storia falsa.

Scrivete quindi una definizione operativa. Per esempio, una pratica è chiusa quando il cliente ha ricevuto l'informazione utile o quando l'azione richiesta è stata completata, e non quando qualcuno l'ha soltanto presa in carico.

Accompagnate la definizione con tre casi limite: uno sicuramente chiuso, uno sicuramente aperto e uno dubbio, con la decisione scritta. Teneteli accanto al foglio del conteggio.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Paolo scopre che metà delle pratiche considerate chiuse erano in realtà messaggi soltanto aperti. Cambia la definizione e rifà la misura di partenza, ma è meglio accorgersene subito che dopo un falso successo.

Approfondimento: la revisione a metà periodo non è facoltativa

A metà pilota fate una revisione breve, invece di aspettare la fine per scoprire un problema grave.

Portate le cinque misure, tre esempi e il consumo, poi decidete se continuare, restringere o spegnere. Scrivete la decisione in poche righe.

Se nessuno trova il tempo per la revisione intermedia, non c'era il tempo nemmeno per il pilota. In quel caso riducete il perimetro finché la revisione diventa sostenibile.

Approfondimento: il gruppo di lavoro che non vuole parlare

A volte i numeri sembrano buoni ma il gruppo di lavoro è teso, ed è il momento di ascoltare.

Chiedete alle persone che cosa fa perdere loro tempo. Spesso si tratta di un riepilogo assente, di proposte troppo lunghe o di passaggi che non arrivano. Riparate quei punti, perché un pilota che vince sui numeri ma logora le persone non regge l'estensione.

Usate una domanda fissa a fine settimana, per esempio «da uno a cinque, quanto è stato utile?», e seguitene l'andamento senza bisogno di seminari.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Marta vede calare il tempo medio, ma anche il morale del gruppo, perché il passaggio senza riepilogo costringe a rifare le domande ai clienti. Dopo la correzione del riepilogo, il morale torna a salire.

Approfondimento: cosa non mettere nel rapporto

Nel rapporto non trovano posto gli slogan, le promesse su flussi mai provati o gli errori gravi nascosti in una nota a piè di pagina.

Il rapporto serve a chi decide su soldi e rischi, e per queste persone tre limiti chiari valgono più di dieci pagine di entusiasmo.

Allegate i numeri grezzi in una tabella semplice. Chi vuole approfondire li trova, mentre chi deve decidere legge le dieci voci e la raccomandazione.

Approfondimento: stagionalità e giorni anomali

Festività, chiusure, campagne commerciali e guasti alterano il confronto. Dichiarateli nel rapporto ed escludeteli quando distorcono i risultati, ma solo in base a una regola scritta in anticipo.

Escludere a posteriori i soli giorni scomodi è una manipolazione. La regola di esclusione nasce insieme alla misura di partenza.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Sara esclude la settimana di chiusura estiva, che aveva dichiarato fin dall'inizio. Non esclude invece il martedì andato male, perché la regola non lo prevede.

Approfondimento: piccoli numeri e falsa certezza

Quando il volume del pilota è basso, un solo errore grave basta a far oscillare le percentuali. Dichiarate l'incertezza e, se serve, allungate il periodo o allargate leggermente il perimetro.

Sei settimane su un flusso ristretto valgono più di due settimane su tutto, perché la stabilità dei numeri conta più della loro quantità.

Approfondimento: collegare misure e decisione

Ogni soglia deve avere una conseguenza stabilita in anticipo. Se gli errori superano il valore X si spegne; se il tempo scende sotto il valore Y con errori stabili si estende; se i segnali sono contrastanti si cambia la parte Z.

Senza conseguenze predefinite, la riunione finale diventa un confronto di opinioni; con le conseguenze scritte, resta una decisione.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Paolo aveva scritto che, in caso di aumento dei ricontatti, l'assistente sarebbe stato spento. I ricontatti salgono e lui lo spegne: è una scelta sgradevole ma corretta, e il gruppo di lavoro rispetta il metodo.

Approfondimento: archiviare il rapporto

Il rapporto non deve restare sepolto nella posta di qualcuno, ma va archiviato dove direzione e IT possono trovarlo. Servirà ai progetti successivi ed eviterà di ripetere gli stessi errori con un nuovo fornitore.

Conservate anche i dati grezzi del conteggio per il tempo previsto dalle vostre regole interne, perché vi serviranno se qualcuno contesterà la decisione.

Approfondimento: comunicazione durante il pilota

Spiegate a chi lavora sul flusso che cosa state provando, quanto dura la prova, come si spegne l'assistente e a chi segnalare i problemi. Senza queste informazioni nascono resistenze oppure usi creativi che nessuno aveva previsto.

Se il pilota tocca i clienti, informate anche loro con la trasparenza dovuta: l'assistente AI si dichiara come tale e ogni cambiamento di percorso si spiega con parole semplici.

Scenario

Questo è uno scenario costruito per spiegare, non un cliente. I nomi di persone e aziende sono inventati.

Scenario: Marta invia al gruppo una nota interna di dieci righe il giorno prima dell'avvio. Tutti sanno che cosa aspettarsi e i falsi allarmi diminuiscono.

Approfondimento: non spostare il traguardo

Se a metà percorso i numeri sono deboli, non abbassate le soglie per salvare il pilota: riparate la parte debole oppure accettate l'esito negativo. Spostare il traguardo distrugge la fiducia nel metodo.

Se le soglie si rivelano irrealistiche, ammettetelo nel rapporto e ripartite. Questa è onestà, ed è una cosa ben diversa dal cambiare le regole in silenzio per ottenere un sì.

Un'ultima regola pratica: il rapporto contiene una sola raccomandazione finale, non tre opzioni tiepide. Chi lo legge deve sapere che cosa succederà il lunedì successivo.

Elenco di controllo

  • Definizioni di pratica, errore e chiusura scritte
  • Misura di partenza raccolta prima dell'accensione
  • Cinque misure con soglie di successo
  • Gruppo di confronto scelto e stabile
  • Nome di chi può spegnere
  • Revisione a metà periodo in calendario
  • Consumo monitorato nel periodo
  • Esempi anonimi pronti per il rapporto
  • Rapporto finale con raccomandazione unica
  • Decisione firmata: estendere, cambiare o fermare

Come si parte

  1. 1

    Scrivete su una pagina flusso, misure, soglie e chi spegne.

  2. 2

    Misurate per almeno due settimane il lavoro di oggi, prima di qualsiasi accensione.

  3. 3

    Fissate già la data del rapporto di fine pilota e chi lo firma.