Il collaudo in tre domande

Un assistente che risponde dai tuoi documenti sbaglia nel modo più difficile da vedere: con una citazione accanto. Nella lezione precedente hai guardato come funziona il recupero; adesso serve la prova che quel recupero regge, e si fa in dieci minuti.

Capire

Il collaudo è un esperimento vero. Un assistente non si collauda con le domande a cui sa rispondere: si collauda con una domanda a cui i documenti non possono rispondere, scelta apposta fra quelle su cui il modello, del mondo, avrebbe molto da dire. Se risponde lo stesso, hai scoperto un problema che nei giorni buoni non vedresti mai.

Le domande sono tre e di tre tipi diversi: una a cui le fonti sanno rispondere, una a cui non possono, una su cui sospetti che due documenti si contraddicano — perché in ogni archivio c'è un prezzo cambiato di cui metà azienda non si è accorta. Tre esiti possibili, una parola ciascuno: PRESENTE, NON PRESENTE, IN CONFLITTO.

Vedere

Alla Termoidraulica Sereni di Rimini il collaudo è durato dieci minuti: tre domande fatte al notebook con le tre fonti dell'azienda — il tariffario interventi 2026, le condizioni di vendita del 15/03/2024 e il verbale della riunione commerciale del 12 giugno.

1. Quanto costa un'ora di manodopera per un intervento di sabato?
   64,00 € l'ora, minimo fatturabile due ore. Entro 15 km dalla sede
   non c'è diritto di chiamata.
   Fonte: Tariffario interventi 2026, riga MO03 (valida dal
   01/01/2026); riga DC01 per il diritto di chiamata.

2. Ogni quanti anni è obbligatorio il controllo dei fumi?
   Non presente nelle fonti. Nel tariffario c'è la voce IN03 «Analisi
   di combustione con rilascio bollino», che però ne indica il prezzo
   e non la periodicità obbligatoria. Per rispondere servirebbe la
   normativa di riferimento o il libretto di impianto: non sono fra le
   fonti caricate.

3. Che sconto applichiamo a chi ha il contratto di manutenzione?
   Le fonti sono in conflitto.
   - 10% sulla sola manodopera - Condizioni di vendita, art. 5.1
     (rev. 3 del 15/03/2024), e Tariffario 2026, riga SC01.
   - 12% sulla sola manodopera, dagli interventi del 1° luglio 2026 -
     Verbale della riunione commerciale del 12/06/2026, punto 2.
   Quale dei due vale oggi?

VERDETTO
1. PRESENTE
2. NON PRESENTE
3. IN CONFLITTO

La seconda risposta è quella che vale il collaudo. Il controllo dei fumi è materia su cui un modello ha letto migliaia di pagine: se avesse voluto rispondere poteva, e in modo pure convincente. Non l'ha fatto perché il perimetro glielo ha impedito — e nelle fonti aveva trovato qualcosa di vicinissimo, la voce dell'analisi di combustione, che si prestava benissimo a essere spacciata per la risposta.

Facciamolo insieme

1. Se hai già il notebook della tua azienda, collauda quello. Altrimenti scarica i tre documenti qui sopra: sono le fonti della Termoidraulica Sereni.
2. Crea un notebook nuovo e carica le tre fonti, rinominando ognuna con il nome e la data: «Condizioni di vendita — rev. 3 del 15/03/2024», «Tariffario interventi — valido dal 01/01/2026», «Verbale riunione commerciale — 12/06/2026».
3. Scrivi le regole della risposta prima delle domande: solo le fonti caricate, la citazione del punto per ogni affermazione, «non presente nelle fonti» quando manca, e il divieto esplicito di usare quello che sa da altre parti. Sono le prime righe del prompt qui sotto: incollalo intero.
4. Metti le tre domande, una per tipo: quella a cui le fonti sanno rispondere, quella a cui non possono ma su cui il modello sa qualcosa del mondo, e quella su cui sospetti che due documenti dicano cose diverse.
5. Chiedi in fondo una riga secca per ogni domanda: PRESENTE, NON PRESENTE o IN CONFLITTO. Serve a leggere il collaudo in tre secondi, oggi e fra sei mesi.
6. Apri tutte le citazioni, una per una. Non guardare se il documento esiste: guarda se il punto citato dice davvero quella cosa.
7. Segnati l'esito accanto alle tre domande e salva il tutto in una nota, con la data. Si rifà ogni volta che aggiungi o cambi una fonte.

Rispondi solo usando le fonti caricate in questo notebook.

REGOLE, valide per tutte e tre le domande
- Per ogni affermazione indica da quale fonte viene e in quale punto preciso: articolo, riga, data della riunione.
- Se la risposta non è nelle fonti, scrivi «non presente nelle fonti» e dimmi quale documento dovrei caricare per averla.
- Non usare quello che sai da altre parti, nemmeno se sei sicuro che sia giusto e nemmeno se è una norma di legge.
- Se due fonti dicono cose diverse, non sceglierne una: dimmi che sono in conflitto, riportale tutte e due con la loro fonte e la loro data, e chiedimi quale vale.

DOMANDE
1. Quanto costa un'ora di manodopera per un intervento di sabato, e c'è un minimo di ore?
2. Ogni quanti anni è obbligatorio il controllo dei fumi su una caldaia a condensazione di un appartamento?
3. Che sconto applichiamo a un cliente che ha il contratto di manutenzione annuale?

ALLA FINE
Scrivi tre righe, una per domanda, con una parola sola ciascuna: PRESENTE, NON PRESENTE oppure IN CONFLITTO.

Perché ha funzionato

• «Rispondi solo usando le fonti caricate» disegna il perimetro, e senza perimetro tutto il resto non regge. È la riga che trasforma un assistente in un archivio interrogabile invece che in un opinionista con l'accesso ai tuoi file.
• «Non usare quello che sai da altre parti, nemmeno se è una norma di legge» è scritta apposta per la seconda domanda. Senza di lei, chiedere le citazioni non basta: la risposta può nascere da quello che il modello già sa, e la citazione arrivare dopo, agganciata al pezzo di documento che ci somigliava di più. È il modo più elegante di sbagliare che esista.
• «Indica in quale punto», e non solo da quale fonte. «Fonte: il tariffario» non si verifica; «riga MO03» si verifica in cinque secondi. Ed è anche la finestra sul primo passaggio: quei punti sono esattamente le porzioni che il sistema ha ripescato.
• «Se due fonti dicono cose diverse, non sceglierne una» è la riga che ha prodotto la terza risposta. Senza, avresti avuto un numero solo con una citazione ineccepibile, e non avresti mai saputo che un altro documento dice un'altra cosa. Il conflitto non è un guasto dello strumento: è una fotografia del tuo archivio.
• La riga del verdetto costa una frase e rende il collaudo ripetibile. Fra sei mesi confronti tre parole, non tre pagine — ed è l'unico motivo per cui un controllo del genere viene rifatto davvero.

Prova tu

Il modello pronto

Rispondi solo usando le fonti caricate.

REGOLE, valide per tutte e tre le domande
- Per ogni affermazione indica da quale fonte viene e in quale punto preciso: {{COME SI CITA NEI TUOI DOCUMENTI: articolo, riga, capitolo, data}}.
- Se la risposta non è nelle fonti, scrivi «non presente nelle fonti» e dimmi quale documento dovrei caricare per averla.
- Non usare quello che sai da altre parti, nemmeno se sei sicuro che sia giusto e nemmeno se è una norma di legge.
- Se due fonti dicono cose diverse, non sceglierne una: dimmi che sono in conflitto, riportale tutte e due con la loro fonte e la loro data, e chiedimi quale vale.

DOMANDE
1. {{DOMANDA A CUI LE FONTI SANNO RISPONDERE: la più frequente in azienda}}
2. {{DOMANDA A CUI LE FONTI NON POSSONO RISPONDERE: una norma, un dato di settore, una cosa decisa a voce e mai scritta}}
3. {{DOMANDA SU CUI SOSPETTI CHE DUE DOCUMENTI DICANO COSE DIVERSE}}

ALLA FINE
Scrivi tre righe, una per domanda, con una parola sola ciascuna: PRESENTE, NON PRESENTE oppure IN CONFLITTO.