La cosa che nessuno ti dice sul tempo
Quando fai una domanda a una persona e la domanda è difficile, quella persona si ferma un attimo. Ci pensa. Il tempo che impiega cresce con la difficoltà, e questo ci sembra così ovvio da non essere nemmeno un'idea: è semplicemente come funziona pensare.
Una macchina che genera testo non fa niente del genere. Per produrre la parola successiva attraversa la rete una volta sola, e quel passaggio ha una lunghezza fissa: lo stesso numero di strati, gli stessi calcoli, sempre. Che tu le abbia chiesto la capitale della Francia o di ripartire un costo fra tre commesse con regole diverse, il lavoro speso per scrivere la prima parola è identico.
Ne segue una cosa che vale la pena fermarsi a guardare. Se pretendi la risposta e basta, hai chiesto di risolvere il problema dentro un passaggio solo. Per le domande facili basta e avanza. Per le altre non c'è abbastanza spazio, e quello che esce non è un ragionamento sbagliato: è un ragionamento che non c'è stato.
Dove va a finire il ragionamento, allora
Va nel testo. È l'unico posto dove può stare.
Ogni parola che la macchina scrive rientra nella domanda per quella dopo — è il meccanismo raccontato nella prima pagina di Uso consapevole: il modello non risponde, continua il tuo testo, e continua anche il proprio. Se la lasci scrivere venti parole di passaggi intermedi, quelle venti parole sono venti attraversamenti in più della rete, e ognuno parte da un testo che contiene il risultato del precedente.
Il foglio su cui fa i conti, insomma, è la risposta stessa. Non ne ha un altro. Chiedendo più testo non stai chiedendo di essere più prolisso: stai chiedendo di calcolare di più.
Quanto cambia, in numeri
Non è una teoria elegante rimasta sulla carta. Nel 2022 un gruppo di ricerca di Google ha misurato che cosa succede a mostrare al modello qualche esempio in cui il ragionamento è scritto per esteso, invece del solo risultato. Su problemi di aritmetica, di senso comune e di logica il salto è stato netto, e — dettaglio che conta — compariva solo nei modelli grandi: sotto una certa dimensione scrivere i passaggi non aiutava affatto.
Pochi mesi dopo un secondo gruppo ha provato la versione povera della stessa idea: niente esempi, solo una frase attaccata in fondo alla domanda — «ragioniamo passo per passo». Su una raccolta di problemi aritmetici l'esattezza è passata dal 17,7% al 78,7%; su un'altra, dal 10,4% al 40,7%. Stesso modello, stessa domanda, quattro parole in più.
Sono numeri di quattro anni fa e su modelli che oggi nessuno usa più. Non li riporto come previsione di quello che otterrai tu: li riporto perché mostrano che l'effetto esiste ed è grande, e perché è raro trovare una leva così economica misurata così bene.
Le tre leve, in ordine di efficacia
Uno. Chiedi il procedimento prima della conclusione. Non «quanto mi conviene?», ma «elenca le voci, calcola ciascuna, poi tira le somme». L'ordine conta: se metti la richiesta di spiegazione dopo quella della risposta, ottieni una giustificazione costruita su una conclusione già scritta, che è un'altra cosa e vale molto meno.
Due. Digli in quali passaggi. «Ragiona passo per passo» funziona; nominare i passaggi funziona meglio, perché il ragionamento non ha bisogno di indovinare anche la propria struttura. Se sai che il lavoro sono quattro cose, scrivi quali quattro.
Tre. Fagli scrivere prima quello che non sa. «Prima di rispondere, elenca le informazioni che ti servirebbero e che non hai.» È la leva meno conosciuta delle tre ed è quella che mi fa risparmiare più tempo: sposta il vuoto dalla risposta all'inizio, dove lo vedi.
La terza è mia e non conosco ricerca che la misuri: sta fra le affermazioni non documentate.
Il limite serio, che quasi nessuno racconta
Qui va detta la cosa scomoda, perché è la parte che rende utile il resto.
Il ragionamento che leggi non è necessariamente quello che la macchina ha fatto. Nel 2023 un gruppo di ricercatori l'ha dimostrato con un esperimento pulito: hanno preso domande a scelta multipla e le hanno riordinate di nascosto in modo che la risposta giusta fosse sempre la (A). I modelli si sono fatti trascinare da quella regolarità — e nelle spiegazioni non l'hanno mai nominata. Continuavano a produrre passaggi ordinati e plausibili a sostegno di risposte sbagliate, con un calo di esattezza fino al 36% su tredici compiti difficili.
Il punto non è che i passaggi siano inutili: i numeri della sezione precedente restano. Il punto è che servono a far calcolare la macchina, non a farti controllare la macchina. Sono due usi diversi, e il secondo non regge: un procedimento che fila non è la prova che il risultato sia giusto. È di nuovo il problema della terza pagina di Uso consapevole, in una forma più insidiosa, perché stavolta ha l'aspetto di una dimostrazione.
Che cosa cambia con i modelli che ragionano da soli
I modelli più recenti fanno questo lavoro per conto proprio: scrivono passaggi prima di rispondere senza che nessuno glielo chieda, e in molti prodotti quei passaggi non te li fanno nemmeno vedere. Su quei modelli l'istruzione «ragiona passo per passo» aggiunge poco, e a volte niente.
Non cambiano invece due cose. Nominare i passaggi resta utile, perché stai dicendo quale procedimento vuoi, non che ce ne sia uno. E il limite di prima resta identico: che i passaggi li abbia chiesti tu o se li sia dati da solo, restano testo prodotto dallo stesso meccanismo che produce le risposte, e valgono come prova esattamente quanto valevano prima. Cioè poco.
Questa è la sezione della pagina che invecchierà per prima. Porta la data apposta.