Come valutare le competenze nell'uso dell'IA nel tuo gruppo di lavoro

Cosa intendete per competenza nell’uso dell’IA?

Ai fini della valutazione, una competenza nell’IA è un comportamento che si può osservare in un compito specifico. Fornire una fonte adeguata, individuare un’affermazione priva di riscontri o spiegare una modifica finale è più specifico che dire che qualcuno è bravo con l’IA. Indica il ruolo, lo strumento e le condizioni, così che chi valuta sappia a che cosa si riferiscono effettivamente le evidenze.

Un'etichetta generica può nascondere capacità diverse. Una persona può scrivere un'istruzione chiara ma non controllare una citazione, oppure verificare i calcoli accettando però una spiegazione della causa priva di riscontri. Mantieni distinte queste osservazioni, anziché ridurle subito a un unico punteggio complessivo. La guida alle competenze nell'IA descrive sette competenze pratiche utilizzate nella maggior parte del lavoro intellettuale; una valutazione dovrebbe specificare quali di esse intende verificare con una determinata attività.

A cosa serve la valutazione?

Definisci lo scopo prima di progettare qualsiasi cosa, perché cambia la posta in gioco. Una valutazione dell'apprendimento aiuta una persona a capire su cosa esercitarsi e dovrebbe consentirle di sbagliare senza timori. Una verifica della preparazione aiuta un responsabile a decidere da dove iniziare un programma. Una valutazione ai fini della certificazione permette di attestare a terzi che una persona ha soddisfatto uno standard definito su compiti definiti. La selezione del personale è un caso a parte, trattato più avanti.

Confondere le finalità causa la maggior parte dei problemi. Se le persone pensano che una verifica iniziale influirà sulle valutazioni delle prestazioni, eviteranno i rischi, non useranno lo strumento o chiederanno aiuto a un collega, e il risultato dirà ben poco. Spiega a cosa servirà il risultato, chi lo vedrà e quali conseguenze non avrà.

Quali segnali dovresti tenere separati?

Sicurezza nelle proprie capacità, completamento e lavoro dimostrato rispondono a domande diverse. Un'autovalutazione indica come si sente una persona. Un attestato di completamento indica che ha raggiunto una tappa del programma. Un'attività pratica le offre l'opportunità di dimostrare determinate scelte in determinate condizioni. Nessuno di questi elementi dovrebbe essere usato al posto degli altri senza dichiararlo.

Un rapporto di valutazione utile dichiara il metodo e i suoi limiti. Se una persona ha svolto una sola attività di redazione su un caso fittizio, va detto. Non bisogna lasciar intendere che sappia gestire in sicurezza qualsiasi flusso di lavoro riservato o con conseguenze rilevanti. Il quadro di gestione dei rischi dell’IA di NIST esprime un principio simile per i sistemi di IA stessi, chiedendo di documentare i limiti alla generalizzazione oltre le condizioni di prova. Lo stesso rigore vale quando si valutano le persone.

Come si sceglie un'attività pratica?

Scegli un'attività pertinente al ruolo e fornisci materiale di riferimento sufficiente per valutare la risposta. Chi si occupa di marketing può rivedere l'email di una campagna fittizia. Un collega delle risorse umane può migliorare le domande di un colloquio sulla base di una descrizione del ruolo. Un collega dell'area finanziaria può spiegare una piccola tabella senza trarre conclusioni sulle cause non supportate dai dati. Un addetto all'assistenza può rispondere alla domanda di un cliente usando un estratto delle condizioni fornito per l'esercizio.

Rendi sicuro il compito su cui esercitarsi. Usa informazioni fittizie o approvate e, nel primo esercizio, evita decisioni che riguardano persone reali, denaro o comunicazioni con i clienti. L'obiettivo è esaminare il lavoro, non creare una decisione automatizzata con conseguenze reali mentre si cerca di misurare una competenza.

Le attività ben progettate contengono un'insidia rilevante. Inserisci un problema realistico che chi impara dovrebbe individuare, come un dettaglio di una procedura aziendale che lo strumento potrebbe inventare o un dato da ricalcolare. Un'attività senza possibilità di errore misura soltanto la capacità di usare lo strumento.

Come si presenta un’attività di valutazione completa?

Ecco un esempio completo per un ruolo di assistenza presso un rivenditore di mobili fittizio, Larchwood Home. Chi segue la formazione riceve l'email di un cliente che chiede se sia possibile sostituire un divano consegnato con un cuscino strappato e un estratto delle condizioni che prevede la sostituzione gratuita degli articoli danneggiati segnalati entro 14 giorni e l'invio di una foto da parte del cliente. Il cliente ha segnalato il danno il giorno 9.

L'istruzione recita: "Usa l'assistente di IA approvato per preparare una bozza di risposta. Usa solo la politica fornita. Non includere l'indirizzo del cliente o il numero d'ordine nella richiesta allo strumento. Consegna la tua richiesta, la bozza dello strumento, la tua risposta finale e due o tre frasi che spieghino le modifiche."

Il rischio è che gli strumenti generici aggiungano spesso un'opzione di rimborso, una data di consegna o un buono a titolo di cortesia che la policy non prevede. Un buon elaborato si limita alla sostituzione, chiede la foto, non indica date prive di riscontro nella policy e spiega perché sono state eliminate eventuali offerte inventate. Un elaborato debole ripropone la bozza dello strumento con lievi modifiche. Entrambi possono essere scritti bene; solo uno può essere inviato in sicurezza.

Cosa deve contenere una griglia di valutazione visibile?

Una griglia di valutazione visibile espone i criteri prima della consegna e descrive cosa ci si aspetta per ogni livello. Tra le categorie utili ci sono contesto, riscontri, gestione delle informazioni e decisioni prese in fase di revisione. Spiega cosa cerca un revisore nel lavoro, anziché assegnare un numero senza descrizione. Dopo aver letto il riscontro, chi sta imparando dovrebbe poter capire cosa migliorare.

La griglia di valutazione seguente è adatta all'attività Larchwood. È una struttura di valutazione editoriale, non una dichiarazione di validazione psicometrica, e non prevede una soglia di superamento validata.

Chi dovrebbe valutare il lavoro, l'IA o una persona?

Entrambi possono farlo, purché i criteri siano visibili e il punteggio possa essere contestato. Una persona che conosce il lavoro è il revisore più affidabile, ma impiega tempo e può applicare i criteri in modo poco uniforme quando valuta molti elaborati. La valutazione dell'IA basata su una griglia di criteri è rapida e può fornire osservazioni specifiche, ma un punteggio espresso con sicurezza non è una prova di accuratezza, e l'IA può non cogliere elementi di contesto che un esperto del settore noterebbe.

Un compromesso pratico consiste nell’usare i riscontri dell’IA per le esercitazioni, prevedere una procedura per segnalare i punteggi contestati e sottoporli a un secondo controllo, e ricorrere alla revisione umana quando il risultato ha conseguenze. La progettazione prevista per Tosheo.ai segue questo schema: attività valutate dall’IA secondo una griglia visibile, con le segnalazioni dei partecipanti inviate a una coda di revisione. Questo flusso rientra nelle funzionalità previste, ma non dimostra che un sistema di valutazione già implementato sia stato convalidato.

Come si garantisce che i revisori applichino criteri coerenti?

Allineate i criteri prima di assegnare i punteggi. Chiedi a due valutatori di valutare in modo indipendente gli stessi tre o quattro elaborati di esempio, confrontate le divergenze e concordate il significato delle formulazioni nella griglia di valutazione. Annota le decisioni accanto a ciascun criterio, ad esempio "un gesto di cortesia è considerato un'offerta inventata, salvo che la policy lo consenta".

Ripeti il controllo di tanto in tanto, facendo esaminare un piccolo campione a una seconda persona. Le indicazioni del NIST sulla misurazione osservano che una revisione indipendente può ridurre le distorsioni interne. In un piccolo team, può bastare che il fondatore e un collega esperto esaminino ciascuno una manciata degli stessi elaborati una volta a trimestre.

Come interpretare i tentativi ripetuti?

Un secondo tentativo può mostrare che una persona ha compreso i commenti ricevuti su quell'esempio. Può anche essere favorito dal ricordo del compito. Usa un esempio nuovo ma comparabile prima di trarre conclusioni più generali e registra eventuali cambiamenti nello strumento, nel materiale di riferimento o nell'assistenza a disposizione di chi sta imparando.

Quando un punteggio conta, rendi verificabile il processo di valutazione e offri la possibilità di contestarlo. Il feedback generato dall'IA può essere utile come spunto di discussione, ma non dovrebbe avere l'ultima parola su un esito che ha conseguenze rilevanti.

Come presentare i risultati?

Riporta ciò che è stato osservato, in quali condizioni e che cosa resta da chiarire. Una registrazione breve e coerente è più utile di un singolo punteggio. Il modello seguente può essere usato per ogni persona o per ogni ruolo.

In cosa si differenzia la valutazione delle competenze dal monitoraggio dell’adozione?

L'utilizzo degli strumenti e la partecipazione possono aiutare un responsabile a capire se un programma viene utilizzato. Da soli, però, non dimostrano che una persona stia prendendo decisioni adeguate. Uno strumento usato spesso può comunque produrre lavoro che nessuno controlla, mentre una persona attenta può usarlo solo per un'attività specifica autorizzata.

Valuta l'adozione insieme agli esempi di lavoro, alle domande sulle regole e al supporto disponibile. Indica quali segnali sono stati osservati e quali mancano. Non trasformare una variazione nella frequenza di accesso in un'affermazione sulla produttività senza un metodo adeguato e riscontri contestuali.

Cosa dovrebbero poter vedere i responsabili?

Ai manager servono informazioni sufficienti per aiutare le persone: quali competenze hanno dimostrato, dove incontrano difficoltà e se stanno facendo progressi. Raramente serve loro il testo integrale di ogni conversazione con uno strumento di IA. Leggere quei registri viene percepito come sorveglianza, scoraggia una pratica trasparente e può esporre informazioni che il partecipante non avrebbe dovuto condividere.

Stabilisci quali informazioni sono visibili e comunicalo prima che chiunque inizi. Il pannello per i responsabili previsto da Tosheo.ai è progettato per mostrare i progressi nelle competenze e il completamento delle lezioni, non i registri integrali delle chat, proprio per questo motivo.

In cosa si differenzia dalla valutazione di un candidato?

La formazione e la selezione del personale hanno scopi diversi. Un'esercitazione può dare a un dipendente già in organico lo spazio per sbagliare e migliorare. La valutazione di un candidato deve rientrare in un processo di selezione equo e definito, con un'adeguata revisione umana e informazioni chiare per i candidati. Lo stesso esempio non va riutilizzato come se i contesti e le conseguenze fossero identici, e un risultato formativo non va usato per prendere una decisione sul rapporto di lavoro per la quale non è stato concepito.

Quando non si dovrebbe svolgere una valutazione delle competenze nell'uso dell'IA?

Non svolgere una verifica prima che le persone dispongano di uno strumento approvato e di regole di base sui dati: misureresti l’accesso e la confusione, anziché le competenze. Non usarla come valutazione delle prestazioni mascherata. E non usare un questionario di autovalutazione, compreso quello sul livello di preparazione presente su questo sito, per stilare classifiche delle persone, assegnare attestati o prendere decisioni sul rapporto di lavoro.

Se ti serve uno strumento psicometrico validato per decisioni importanti, l'approccio descritto qui non lo è. È un metodo pratico per le conversazioni sull'apprendimento e la pianificazione dei programmi, basato sulle indicazioni di NIST riguardo al contesto e ai limiti. Tali indicazioni non approvano né convalidano questo approccio alla valutazione dei dipendenti.

Quale dovrebbe essere il passo successivo per un responsabile?

Scegli un'attività pertinente al ruolo, condividi una breve griglia di valutazione e analizza il ragionamento insieme a chi sta imparando. Annota la fonte, lo strumento e le condizioni. Stabilisci quali conclusioni sono sostenute dalle evidenze e quali richiedono un altro esempio. È un punto di partenza pratico per un confronto utile sull'apprendimento.

Se la domanda più generale è se il team sia pronto a esercitarsi, inizia dalla lista di controllo della preparazione, che copre l'accesso agli strumenti, i limiti sulle informazioni, gli standard di revisione e il supporto. L'autoverifica può aiutare ad avviare questa conversazione. Entrambe sono strumenti di discussione, non sostituiscono la dimostrazione pratica delle capacità.

Fonti e ambito

Nucleo del quadro NIST per la gestione dei rischi dell'IA, verificato il 16 October 2026 ↗

Manuale operativo NIST per la gestione dei rischi dell'IA: governare, verificato il 16 October 2026 ↗