PDF lunghi e... l’IA perde il filo?

Carichiamo PDF lunghi e otteniamo risposte confuse? Guidare l’intelligenza artificiale con prompt specifici è la chiave per analisi precise e riassunti affidabili, senza rischiare di ricevere informazioni approssimative o addirittura inventate.

Ci è certamente capitato di utilizzare applicazioni di intelligenza artificiale generativa per ottenere un riassunto oppure per generare esercizi a partire da una dispensa, solitamente in formato PDF.

In qualche occasione ci siamo anche accorti che, soprattutto con i PDF lunghi, l’IA può “perdere il filo” se non addirittura inventare dettagli inesistenti.

I motivi sono diversi: impaginazioni complesse, testi vaghi, ambigui o non ben suddivisi in capitoli e paragrafi, presenza di numerose immagini e così via. Ma tratteremo questo aspetto nella parte finale dell’articolo.

Ecco quindi alcuni consigli per ottenere buoni risultati quando passiamo ai sistemi di IA un documento da analizzare e, di seguito, due modelli di prompt dettagliati.

PDF lunghi e IA, come gestirli

• Evitiamo i PDF con troppe immagini. Chiediamo al chatbot di segnalare le pagine che non riesce a leggere.
• Anteprima del contesto: prima di analizzare un blocco di pagine, chiediamo all’IA di elencare i titoli dei capitoli o gli argomenti principali di quelle pagine. Questo aiuta a “impostare” il contesto. Ecco un esempio: «Prima di iniziare, elenca i titoli principali delle pagine da 5 a 10. Poi procedi con l’analisi».
• Analizziamo un numero limitato di pagine alla volta (per esempio 8-10). «Analizza le pagine da 1 a 8, concludi con un riassunto e con l’elenco dei punti chiave».
• Limitiamo e/o strutturiamo l’output. «Suddividi la tua risposta in punti, usando 100 parole al massimo».
• Impostiamo vincoli forti, come chiedere al chatbot di usare solo il PDF caricato. «Se qualcosa non è nel testo, scrivi: “NON TROVATO NEL PDF”».
• Chiediamo sempre le referenze. «Per ogni affermazione metti il numero di pagina (eventualmente anche il paragrafo se disponibile)».
• In caso di immagini o tabelle importanti, puntiamo a una descrizione esplicita. «Trascrivi i valori della tabella a pagina … ».
• Facciamo emergere le ambiguità del testo. «Se un concetto non è espresso in modo chiaro e inequivocabile, segnalalo come “AMBIGUO”».
• Richiediamo una verifica finale, dopo aver ottenuto il riassunto (di una parte del PDF o di tutto). «Rileggi e segnala incongruenze, ambiguità e punti non coperti dal PDF».

Modello di prompt per il riassunto di una circolare

(Segue schema di prompt).

Analizza il PDF che ho caricato (indichiamo eventualmente il nome).
Lavora SOLO sulle pagine da … a … .
Produci un riassunto strutturato in italiano, con riferimenti di pagina obbligatori.

Schema di output che desidero ottenere:

1. Oggetto della circolare: … (p. ).
2. Destinatari: … (p. ).
3. Finalità: … (p. ).
4. Cosa cambia rispetto a prima: … (p. ).
5. Adempimenti richiesti per la scuola, i docenti, gli ATA: … (p. ).
6. Scadenze con date esatte: … (p. ).
7. Eccezioni e deroghe: … (p. ).
8. Basi normative citate: … (p. ).
9. Allegati citati: … (p. ).
10. Modelli citati: … (p. ).

Chiudi con una lista di controllo operativa in 5 punti (con indicazioni pagine).

Se un’informazione non è nel PDF, scrivi: “NON TROVATO NEL PDF”.

Modello per la creazione di esercizi da dispense

(Segue schema di prompt).

Estrai esclusivamente dai contenuti delle pagine del PDF che hai caricato (eventualmente citando il nome).
Obiettivi e competenze (da declinare in base al testo): … .
Target: (classe, età e altri parametri).
Genera:
A) 4 domande a risposta multipla (1 corretta + 3 “distrattori” plausibili) con soluzione e indicazione di pagina.
B) 2 esercizi aperti brevi (soluzione attesa in 3-5 righe) con indicazione di pagina.
C) 1 esercizio volutamente errato: presenta una soluzione sbagliata e chiedi di correggerla, indicando l’errore.

Vincoli:

1. Ogni esercizio deve citare la pagina di origine.
2. Non utilizzare conoscenze esterne: se manca nel PDF scrivi “NON TROVATO NEL PDF”.
3. Adotta un linguaggio adatto al target indicato.

Restituisci anche una griglia di valutazione, indicando punti, criteri e altri parametri disponibili.

Alcune considerazioni tecniche sui PDF lunghi e l’IA

Volendo approfondire la questione dal punto di vista tecnico, viene spontaneo chiedersi perché i PDF lunghi fanno “perdere il filo” a modelli di intelligenza artificiale generativa come ChatGPT o Gemini.

Il PDF non è testo lineare, è più un insieme di box grafici che possono contenere testo o immagini.
Nell’estrazione, il sistema di intelligenza artificiale deve “indovinare” la sequenza. Questa operazione può diventare tortuosa se il PDF presenta layout complessi, per esempio le note a piè di pagina .

Inoltre, se il testo è troppo lungo, viene suddiviso in pezzi (chunk) e si viene a perdere una certa “visione d’insieme” del testo stesso. Con contesti troppo lunghi, i modelli di IA potrebbero privilegiare l’inizio o la fine, creando quindi alcune “distorsioni” (vedi anche “Bias cognitivo”).

Un metodo “fai da te” per mitigare questo problemi? Esiste ed è molto semplice: prima di chiedere al modello prescelto di intelligenza artificiale generativa di analizzare il nostro testo, procediamo a convertire il PDF in testo (.txt).