Blocco I · Fondamenti · Lezione 2
Come pensa (e sbaglia) un modello di IA
Capirai cosa succede dentro, da quando scrivi a quando risponde: cosa sono i token, la finestra di contesto e la temperatura, perché alcuni modelli ragionano prima di rispondere e perché a volte si inventano dati con totale sicurezza.
- 14 min
- 13 slide animate
- Quiz di 6 domande
- Narrata in 6 lingue
Cosa vedrai in questa lezione
- Dalla tua domanda alla sua risposta, token per token
Un modello linguistico non cerca la risposta da nessuna parte: la scrive pezzo per pezzo, prevedendo cosa viene dopo.
- Token: i mattoncini Lego del linguaggio
Il modello non legge lettere né parole intere, ma token: pezzi frequenti di testo che si incastrano come mattoncini.
- Ecco come si fa: conta i token del tuo testo
Incolla qualsiasi testo nel tokenizzatore gratuito di OpenAI e saprai quanti token occupa prima di inviarlo.
- Un completamento automatico del telefono, ma gigante
Per ogni spazio vuoto, il modello calcola la probabilità di migliaia di token possibili e ne sceglie uno dei più probabili.
- Addestrare e inferire: studiare e fare l'esame
Il modello impara una volta, per mesi; ogni volta che gli fai una domanda applica solo ciò che ha imparato. Questa è l'inferenza.
- La finestra di contesto: la sua scrivania
È tutto ciò che il modello ha davanti quando risponde. Ciò che non è sulla scrivania, per lui non esiste.
- Temperatura: il pizzico di sale della creatività
Regola quanto rischia il modello nello scegliere il token successivo: bassa, il più probabile; alta, opzioni più varie.
- Provalo: la previsione e la temperatura dal vivo
Transformer Explainer è un sito gratuito che esegue un modello piccolo nel tuo browser e ti mostra le sue probabilità.
- Modelli di ragionamento: pensano prima di parlare
Prima di rispondere scrivono una bozza interna di ragionamento, e così risolvono meglio i problemi a più passaggi.
- Perché inventa cose con tanta sicurezza
Un'allucinazione è un dato falso detto con convinzione. Non è un errore raro: nasce da come impara e da come viene valutato.
- Quanto costa tirare a indovinare: i numeri di OpenAI
In un test di domande su dati precisi, il modello che non diceva mai «non lo so» ci ha azzeccato quasi uguale e ha sbagliato quasi il triplo.
- Ecco come chiedere perché inventi meno
Tre frasi nel tuo prompt cambiano ciò che conviene al modello: dubitare smette di essere un errore.
- Riepilogo: come pensa e perché sbaglia
Un modello è un predittore di token molto ben addestrato: capire come funziona ti aiuta a chiedere meglio e a diffidare al momento giusto.
Strumenti e concetti
- Tokenizer
- Reasoning
- Temperature
Accedi con il tuo account Google per vedere questa lezione e tutto il corso.