Un agente IA utile parte da un compito.
Vedi un possibile ruolo per l’IA nella tua attività. Esaminiamo un compito reale, le informazioni disponibili e gli errori accettabili per decidere cosa affidare a un agente.
Un utilizzo preciso.
Ricerca documentale
Verificare fonti disponibili, qualità e diritti di consultazione.
Preparazione di risposte
Definire cosa propone l’agente e cosa deve approvare una persona.
Azioni nei tuoi strumenti
Identificare accessi necessari e situazioni in cui l’agente deve fermarsi.
Cosa ottieni dalla definizione.
Un caso d’uso delimitato
Dati in ingresso, risultato atteso e limiti di responsabilità.
Una specifica scritta del compito, che indica il punto esatto in cui l’agente restituisce la mano a una persona.
Un protocollo di valutazione
Esempi rappresentativi e criteri di qualità, tempi e costi.
Un insieme di prova con cinquanta casi reali valutati, in un foglio di calcolo che le resta e che potrà rieseguire fra sei mesi.
Una valutazione di fattibilità
Punti verificati con un prototipo mirato e incognite da risolvere.
Un rapporto con il tasso di riuscita misurato e il costo per esecuzione, e il codice del prototipo in un repository di sua proprietà.
Quanto tempo serve.
Da due a quattro settimane. Costruire l’insieme di prova occupa la maggior parte del tempo; il prototipo in sé richiede spesso pochi giorni. I primi risultati misurati arrivano nella seconda settimana, e sono quasi sempre più bassi di quanto si sperava.
Cosa serve da Lei.
Cinquanta casi reali, con le risposte
Pratiche passate e quello che un collega competente ha davvero risposto a ciascuna. Senza, la valutazione non ha niente da misurare e diventa un’opinione.
Qualcuno che sappia dire cos’è una buona risposta
Una persona che conosce il mestiere, due o tre ore in tutto, per giudicare i casi controversi. La correttezza è un giudizio prima di essere un numero.
Una decisione su cosa l’agente può toccare
Un accesso in lettura si ottiene in fretta. Scrivere nei suoi strumenti è un’altra conversazione, con chi ne risponde, e aprirla presto evita tre settimane di attesa alla fine.