Notizia

Jul 24, 2023

Mettiti alla prova con 10 IA

The news quiz is a tradition at TIME that dates back to 1935. Iterations of the

Il quiz sulle notizie è una tradizione del TIME che risale al 1935. Le iterazioni del test sono state utilizzate nelle scuole di tutto il paese per esaminare le conoscenze di attualità, ed è arrivato anche in una versione di cruciverba.

Ora, la recente rimozione del paywall digitale di TIME ha aperto a tutti un secolo di giornalismo, pronto per mettere alla prova la tua conoscenza delle persone che hanno plasmato la storia. Poiché l'archivio di TIME contiene 200 milioni di parole, è un compito adatto alla nuova generazione di tecnologia AI, che è in grado di analizzare enormi quantità di testo generato dall'uomo in pochi secondi.

Cosa succede allora quando si sfrutta la potenza dell’intelligenza artificiale all’avanguardia per generare quiz di notizie basati su articoli di riviste?

Di seguito troverai 10 quiz che abbiamo addestrato a produrre con la tecnologia dietro ChatGPT, basati su 10 storie selezionate manualmente dagli archivi TIME, che ora sono disponibili per tutti gratuitamente. Basta fare clic sul titolo dell'articolo, accanto alla data di pubblicazione originale, per passare alla storia su cui si basa ciascun quiz. Sotto l'interattivo, discutiamo di come abbiamo negoziato con l'intelligenza artificiale per insegnarle a fare ciò che abbiamo chiesto.

Considerati alcuni dei risultati davvero sorprendenti che ChatGPT può produrre (ad esempio, la trama di un romanzo di fantascienza o finti testi biblici), produrre un quiz può sembrare un compito banale (per così dire). E a prima vista, lo è. Quando abbiamo chiesto a ChatGPT di "creare un quiz basato su questo articolo" e fornito un collegamento alla storia di copertina di TIME del 2014 su Taylor Swift, ha prontamente risposto un quiz di 10 domande con quattro scelte per ciascuna risposta.

Alcune delle domande erano giuste. (D: I fan di Taylor Swift sono notoriamente chiamati come? A: Swifties.) Ma molti si riferivano ad album ed eventi accaduti ben dopo la pubblicazione della storia, e uno era semplicemente sbagliato. ("Quale evento l'ha portata a sostenere pubblicamente un candidato politico per la prima volta?" ChatGPT ha affermato che si trattava delle elezioni del 2020, ma ha fatto marcia indietro e si è scusato quando gli abbiamo ricordato che aveva appoggiato due democratici del Tennessee nel 2018.)

In molti casi, ChatGPT e i suoi vari rivali possono sembrare indistinguibili dalla magia. Quindi è istruttivo trovare incarichi in cui i robot non sono immediatamente capaci di raggiungere la perfezione. Ogni fallimento è un indizio di cosa sta succedendo sotto il cofano.

Quindi analizziamo cosa comporta un quiz con domande a scelta multipla e cosa richiede che una macchina faccia:

Per un essere umano, in particolare uno che ha visto alcuni quiz giornalistici e ha familiarità con l'esercizio, questa è probabilmente più istruzione del necessario. Ma fino a poco tempo fa una macchina non sarebbe bastata. Un anno fa, questo esercizio avrebbe comportato la scrittura di molto codice, la scelta tra diversi algoritmi e modelli linguistici pre-addestrati e la modifica costante degli “iperparametri” o condizioni iniziali definite dall’uomo per il processo di addestramento.

In questo nuovo mondo, il compito è da qualche parte nel mezzo. Invece di scrivere istruzioni in Python, dove un singolo tasto premuto fuori posto può far deragliare l’intera operazione, fornisci le istruzioni alla macchina in un inglese semplice, nel modo più preciso e letterale possibile.

Questo è noto come prompt della "catena di pensiero", che puoi fornire direttamente all'API OpenAI, bypassando la conversazione con un chatbot e interfacciandoti invece direttamente con il cervello di ChatGPT. Utilizzi ancora un linguaggio come Python per fare l'introduzione, ma è il bot a fare tutto il duro lavoro.

Abbiamo inviato una versione delle istruzioni di cui sopra all'API e impostato la "temperatura", ovvero la randomizzazione dei risultati, su zero, il che significa che il modello risponderebbe allo stesso modo ogni volta che gli inviassimo comandi identici. Quando gli abbiamo fornito la stessa storia di Taylor Swift e abbiamo ricevuto un'altra serie di 10 domande a scelta multipla. Eccone uno:

Chi è stata nominata donna dell'anno da Billboard per il 2014?

R: Rihanna

b: Taylor Swift

c:Lady Gaga

d: Beyonce

Qualche ipotesi? Suggerimento: anche la risposta a cinque delle altre nove domande è stata "Taylor Swift".