Il contesto batte il calcolo (per ora)

I miei feed sono inondati di post AI. Le persone sembrano sorprese dagli ultimi modelli di linguaggio di grandi dimensioni (ad esempio, ChatGPT) e generatori di immagini (ad esempio, Midjourney). Come siamo passati in pochi anni da chatbot che riuscivano a malapena a capire semplici comandi ad assistenti sapientoni in grado di spiegare la teoria delle stringhe, redigere lettere di accompagnamento e raccontare barzellette a papà meglio di me?

La risposta sta nel potere del contesto. Come esseri umani, ci piace pensare al mondo come ben ordinato. Scrivere un'e-mail è diverso dal dipingere un quadro o cuocere il pane. In realtà, il mondo è disordinato. Gli stessi neuroni che usiamo per dipingere servono anche per scrivere una mail. Pensi a una "S" come a un elemento costitutivo del linguaggio. In realtà, è anche una linea ondulata elaborata dalla tua corteccia visiva.

Per anni, i neuroscienziati hanno operato su una teoria della localizzazione. Ogni parte del cervello era responsabile di compiti specifici e studiare le parti ti avrebbe aiutato a spiegare il tutto. Questa teoria è stata ampiamente smentita. Le connessioni tra le diverse parti del cervello possono essere meno numerose ma svolgono un ruolo centrale.

Quello che sto descrivendo è il contesto. I nostri cervelli sembrano essere "magici" perché applichiamo schemi appresi da un dominio ad altri. Il contesto è la differenza tra ChatGPT e il chatbot utilizzato dalla tua compagnia telefonica. Hai bisogno di leggere l'intera Wikipedia per aiutare con una bolletta telefonica? No, ma il contesto aiuta quando la conversazione va fuori copione.

Ciò che manca alle macchine nel contesto, viene compensato dal calcolo. ChatGPT non "sa" cosa sia un cane allo stesso modo di un essere umano. Non può generare l'immagine di un cane, riprodurre il suono di un cane o riconoscerne l'odore. Tuttavia, ChatGPT ha letto di più sui cani che su qualsiasi essere umano. Se chiedi a ChatGPT quante zampe ha un cane, risponderà correttamente. L'intelligenza artificiale non ha una comprensione contestuale del "cane", ma ha visto dati sufficienti per prevedere con precisione cosa dovrebbe venire dopo la domanda "Quante zampe ha un cane?"

La battaglia tra contesto e calcolo è fondamentale per l'automazione. Il problema delle auto a guida autonoma ne è un buon esempio. Gli algoritmi che oggi alimentano le auto a guida autonoma sono addestrati a prevedere gli input di sterzo, freno e acceleratore utilizzando informazioni visive dall'ambiente. Gli algoritmi hanno sensori migliori e possono prendere decisioni più rapide di qualsiasi essere umano. Le auto a guida autonoma sono già superiori in termini di calcolo.

La sfida è che la guida beneficia anche del contesto. Se stai guidando lungo una strada al tramonto e vedi un cervo in un campo, probabilmente rallenterai, guarderai il lato della strada e ti sposterai in una corsia interna. Usi la tua comprensione contestuale di "cervo" per regolare gli input di sterzo, acceleratore e frenata. La macchina vede il cervo ma non ha il vantaggio del contesto. La macchina non sa che i cervi corrono spesso davanti alle auto e che un singolo cervo potrebbe segnalare che altri cervi stanno aspettando nella foresta davanti a loro.

Le macchine risolvono il problema della guida autonoma attraverso il calcolo. L'algoritmo può riconoscere un cervo che salta davanti alla tua auto e applicare il freno più velocemente di te. Tuttavia, la tua comprensione contestuale dei cervi ti consente di adottare misure preventive oltre la portata degli algoritmi esistenti. La potenza del contesto supera la potenza del calcolo.

Cosa significa l'importanza del contesto per l'ascesa dell'IA? A mio avviso, il contesto è semplicemente una funzione di modelli più grandi. ChatGPT e Midjourney sono modelli separati oggi, ma non è necessario che lo siano in futuro. Man mano che i modelli diventano più grandi, la comprensione contestuale dovrebbe aumentare. Il risultato sarebbe un'intelligenza artificiale che imita ciò che troviamo magico nel cervello umano. Il calcolo è un inizio, non una fine.