La nuova versione di GPT-3

InstructGPT e la ricerca di un’IA equa: è un obiettivo realistico?

Pur migliorando il suo modello, eliminando alcuni dei pregiudizi più tossici che affliggevano il suo predecessore, OpenAI non ha risolto tutte le criticità con il suo InstructGPT. Ecco perché

22 Mar 2022
Marco Martorana

avvocato, studio legale Martorana, Presidente Assodata, DPO Certificato UNI 11697:2017

Lucas Pinelli

Studio legale Martorana – Vice President for Marketing, ELSA Belgium

renAIssance - intelligenza artificiale

In una comunicazione della fine dell’anno 2021, OpenAI ha comunicato di aver creato una nuova versione di GPT-3, capace di eliminare alcuni dei pregiudizi più tossici che affliggevano il suo predecessore.

Il laboratorio con sede a San Francisco afferma, così, che il modello aggiornato, chiamato InstructGPT, è più efficace nel seguire le istruzioni delle persone che lo utilizzano, noto come “allineamento” nel gergo dell’IA, e quindi produce un linguaggio meno offensivo, meno disinformazione e meno errori in generale.

Tutto risolto, quindi? Non proprio. Vediamo perché.

GPT-3, Polimi: “Quali applicazioni business per il nuovo modello OpenAI”

Cos’è GPT-3

GPT-3 è un sistema di intelligenza artificiale sviluppato da OpenAI, la società di ricerca sull’IA co-fondata da Elon Musk, e in grado di creare contenuti scritti con una struttura linguistica degna di un testo scritto da un essere umano. Agli occhi di molti esperti, questa invenzione rappresenta uno dei più importanti progressi fatti nel campo dell’IA negli ultimi anni. È anche la più grande rete neurale mai creata finora.

INFOGRAFICA
I migliori data analytics tools a confronto: CHI VINCE?
Big Data
Datacenter

Il termine GPT-3 è l’acronimo di “Generative Pre-trained Transformer 3”. Questo modello ha 175 miliardi di parametri, ovvero i valori che una rete neurale cerca di ottimizzare durante l’addestramento. Per fare un confronto, il suo predecessore GPT-2 ne aveva già 1,5 miliardi.

In poche parole, quindi, GPT-3 genera testo utilizzando algoritmi pre-addestrati. Ciò significa che gli algoritmi sono stati alimentati con i dati necessari per completare il loro compito. Nel dettaglio, questi algoritmi sono stati addestrati da circa 570GB di testi raccolti su Internet.

Tuttavia, modelli linguistici di grandi dimensioni come GPT-3 vengono addestrati utilizzando vasti corpi di testo, maggiormente raccolti appunto sul web, in cui si può trovare il meglio e il peggio di ciò che le persone possono scrivere. Questo è un grande problema per i chatbot e gli strumenti di generazione di testo attuali che assorbono anche il linguaggio tossico da testi che possono rivelarsi razzisti, misogini o che contengono pregiudizi più insidiosi e radicati, così come le fake news.

Infatti, per molto tempo, OpenAI stessa ha ritenuto il suo modello di elaborazione del linguaggio naturale troppo pericoloso per essere pubblicato.

InstructGPT: un modello più equo

In pratica, la nuova funzione consente adesso agli sviluppatori di mettere a punto facilmente GPT-3 per personalizzare il modello in base alle proprie esigenze applicative.

Senza questo grado di personalizzazione, GPT-3 poteva già svolgere un’ampia varietà di attività: ricerca semantica, analisi del sentimento, traduzione, generazione di contenuti o riepilogo automatico del testo, ecc. Il perfezionamento, basato su testo di esempio associato a compiti specifici, però, promette di produrre risultati ancora più adeguati. Questo perfezionamento riduce anche i costi e migliora la latenza. Il miglioramento sarebbe già visibile alimentando il modello con meno di 100 esempi personalizzati.

Precedenti tentativi di affrontare il problema includevano il filtraggio del linguaggio offensivo dal set di addestramento. Ma ciò può ridurre le prestazioni dei modelli, soprattutto nei casi in cui i dati di addestramento sono già scarsi, come il testo di gruppi minoritari.

I ricercatori di OpenAI hanno cercato di risolvere questo problema iniziando con un modello GPT-3 completamente addestrato. Hanno quindi aggiunto un altro ciclo di formazione, utilizzando l’apprendimento per rinforzo per insegnare al modello cosa dovrebbe dire e quando, in base alle preferenze degli utenti umani.

Con questa mossa, OpenAI ha voluto reindirizzare i suoi sforzi per creare un modello più accurato, onesto e innocuo. Tuttavia, è difficile definire caratteristiche come l’onestà nel contesto dei modelli linguistici. Se l’onestà può essere definita come il grado in cui il comportamento espresso si correla con le convinzioni interne, quest’ultime sono difficili da individuare nella “scatola nera” che rappresenta un modello linguistico. Anche definire cosa è dannoso a volte può essere complicato. In definitiva, dipende dall’applicazione specifica del modello nel mondo reale. Non è la stessa cosa distribuire un modello di generazione del linguaggio generico rispetto a un modello di rilevamento della tossicità.

I rischi rimanenti

Pur migliorando il suo modello, OpenAI non ha risolto tutte le criticità con il suo InstructGPT.

Come innanzi accennato, i miglioramenti si basano essenzialmente sulla personalizzazione dell’addestramento. Un utente malintenzionato, tuttavia, potrebbe comunque trarne vantaggio per rendere il modello meno onesto e utile e più dannoso, contrariamente a quanto voluto da OpenAI. Trattasi di un modello ancora più potente del GPT-3, il danno potrebbe risultare maggiore.

Per lo stesso motivo, InstructGPT può rivelarsi più tossico se gli viene richiesto. Infatti, l’incremento della tossicità è maggiore quando viene specificamente richiesta rispetto al decremento quando viene richiesto di essere rispettoso. I modelli sono anche generalmente più parziali rispetto a GPT-3. Una possibile spiegazione è che InstructGPT è più sicuro delle sue risposte indipendentemente dal fatto che si impegni in stereotipi, come propongono gli autori. Un altro motivo potrebbe essere che l’allineamento del modello con un gruppo specifico di persone lo disallinea con altri gruppi e ciò si riflette sulla valutazione del benchmark.

Conclusioni

In conclusione, l’opera di OpenAI si inserisce in un contesto di “democratizzazione” dell’IA volto a rendere gli algoritmi disponibili al pubblico, in modo tale che esso possa studiarli, capirli e quindi usarli meglio. Ciò nonostante, come ogni altra cosa, l’IA non è stata creata dal nulla, è un prodotto della società e come tale eredita inesorabilmente tutti i nostri pregiudizi e preconcetti. Se è necessario ridurre al minimo i pregiudizi e le criticità dell’IA, bisogna allo stesso tempo essere consapevoli che l’intelligenza artificiale non potrà mai essere perfettamente equa: essa è infatti tanto parziale quanto noi, esseri umani.

@RIPRODUZIONE RISERVATA

Speciale PNRR

Tutti
Incentivi
PA
Sostemibilità
Analisi
Formazione
Salute digitale
Sicurezza
Sostenibilità
Digital Economy
Formazione
Trasferimento tecnologico, il Mise mette sul piatto 7,5 milioni
Strategie
PSN e Strategia Cloud Italia: a che punto siamo e come supportare la PA in questo percorso
Dispersione idrica
Siccità: AI e analisi dei dati possono ridurre gli sprechi d’acqua. Ecco gli interventi necessari
PNRR
Cloud, firmato il contratto per l’avvio di lavori del Polo strategico
Formazione
Competenze digitali, stanziati 48 milioni per gli Istituti tecnologici superiori
Iniziative
Digitalizzazione delle reti idriche: oltre 600 milioni per 21 progetti
Competenze e competitività
PNRR, così i fondi UE possono rilanciare la ricerca e l’Università
Finanziamenti
PNRR, si sbloccano i fondi per l’agrisolare
Sanità post-pandemica
PNRR, Missione Salute: a che punto siamo e cosa resta da fare
Strategie
Sovranità e autonomia tecnologica nazionale: come avviare un processo virtuoso e sostenibile
La relazione
Pnrr e PA digitale, l’alert della Corte dei conti su execution e capacità di spesa
L'editoriale
Elezioni 2022, la sfida digitale ai margini del dibattito politico
Strategie
Digitale, il monito di I-Com: “Senza riforme Pnrr inefficace”
Transizione digitale
Pnrr: arrivano 321 milioni per cloud dei Comuni, spazio e mobilità innovativa
L'analisi I-COM
Il PNRR alla prova delle elezioni: come usare bene le risorse e centrare gli obiettivi digitali
Cineca
Quantum computing, una svolta per la ricerca: lo scenario europeo e i progetti in corso
L'indice europeo
Desi, l’Italia scala due posizioni grazie a fibra e 5G. Ma è (ancora) allarme competenze
L'approfondimento
PNRR 2, ecco tutte le misure per cittadini e imprese: portale sommerso, codice crisi d’impresa e sismabonus, cosa cambia
Servizi digitali
PNRR e trasformazione digitale: ecco gli investimenti e le riforme previste per la digitalizzazione della PA
Legal health
Lo spazio europeo dei dati sanitari: come circoleranno le informazioni sulla salute nell’Unione Europea
Servizi digitali
PNRR e PA digitale: non dimentichiamo la dematerializzazione
Digital Healthcare transformation
La trasformazione digitale degli ospedali
Governance digitale
PA digitale, è la volta buona? Così misure e risorse del PNRR possono fare la differenza
Servizi digitali
Comuni e digitale, come usare il PNRR senza sbagliare
La survey
Pnrr e digitale accoppiata vincente per il 70% delle pmi italiane
Missione salute
Fascicolo Sanitario Elettronico alla prova del PNRR: limiti, rischi e opportunità
Servizi pubblici
PNRR: come diventeranno i siti dei comuni italiani grazie alle nuove risorse
Skill gap
PNRR, la banda ultra larga crea 20.000 nuovi posti di lavoro
Il Piano
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUMPA2022
PNRR e trasformazione digitale: rivedi i Talk di FORUM PA 2022 in collaborazione con le aziende partner
I contratti
Avio, 340 milioni dal Pnrr per i nuovi propulsori a metano
Next Generation EU
PNRR, a che punto siamo e cosa possono aspettarsi le aziende private
Fondi
Operativo il nuovo portale del MISE con tutti i finanziamenti per le imprese
Servizi comunali
Il PNRR occasione unica per i Comuni digitali: strumenti e risorse per enti e cittadini
Healthcare data platform
PNRR dalla teoria alla pratica: tecnologie e soluzioni per l’innovazione in Sanità
Skill
Competenze digitali, partono le Reti di facilitazione
Gli obiettivi
Scuola 4.0, PNRR ultima chance: ecco come cambierà il sistema formativo
Sistema Paese
PNRR 2, è il turno della space economy
FORUM PA 2022
FORUM PA 2022: la maturità digitale dei comuni italiani rispetto al PNRR
Analisi
PNRR: dalla Ricerca all’impresa, una sfida da cogliere insieme
Innovazione
Pnrr, il Dipartimento per la Trasformazione digitale si riorganizza
FORUM PA 2022
PA verde e sostenibile: il ruolo di PNRR, PNIEC, energy management e green public procurement
Analisi
PNRR, Comuni e digitalizzazione: tutto su fondi e opportunità, in meno di 3 minuti. Guarda il video!
Rapporti
Competenze digitali e servizi automatizzati pilastri del piano Inps
Analisi
Attuazione del PNRR: il dialogo necessario tra istituzioni e società civile. Rivedi lo Scenario di FORUM PA 2022
Progetti
Pnrr, fondi per il Politecnico di Torino. Fra i progetti anche IS4Aerospace
Analisi
PNRR, Colao fa il punto sulla transizione digitale dell’Italia: «In linea con tutte le scadenze»
La Svolta
Ict, Istat “riclassifica” i professionisti. Via anche al catalogo dati sul Pnrr
Analisi
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUM PA 2022
Ecosistema territoriale sostenibile: l’Emilia Romagna tra FESR e PNRR
Il Piano
Innovazione, il Mise “centra” gli obiettivi Pnrr: attivati 17,5 miliardi
Analisi
PNRR: raggiunti gli obiettivi per il primo semestre 2022. Il punto e qualche riflessione
Analisi
PNRR: dal dialogo tra PA e società civile passa il corretto monitoraggio dei risultati, tra collaborazione e identità dei luoghi
Webinar
Comuni e PNRR: un focus sui bandi attivi o in pubblicazione
Analisi
Formazione 4.0: cos’è e come funziona il credito d’imposta
PA e Sicurezza
PA e sicurezza informatica: il ruolo dei territori di fronte alle sfide della digitalizzazione
PA e sicurezza
PNRR e servizi pubblici digitali: sfide e opportunità per Comuni e Città metropolitane
Water management
Water management in Italia: verso una transizione “smart” e “circular” 
LE RISORSE
Transizione digitale, Simest apre i fondi Pnrr alle medie imprese
Prospettive
Turismo, cultura e digital: come spendere bene le risorse del PNRR
Analisi
Smart City: quale contributo alla transizione ecologica
Decarbonizzazione
Idrogeno verde, 450 milioni € di investimenti PNRR, Cingolani firma
Unioncamere
PNRR, imprese in ritardo: ecco come le Camere di commercio possono aiutare
I fondi
Industria 4.0: solo un’impresa su tre pronta a salire sul treno Pnrr
Formazione
Trasferimento tecnologico, il Mise mette sul piatto 7,5 milioni
Strategie
PSN e Strategia Cloud Italia: a che punto siamo e come supportare la PA in questo percorso
Dispersione idrica
Siccità: AI e analisi dei dati possono ridurre gli sprechi d’acqua. Ecco gli interventi necessari
PNRR
Cloud, firmato il contratto per l’avvio di lavori del Polo strategico
Formazione
Competenze digitali, stanziati 48 milioni per gli Istituti tecnologici superiori
Iniziative
Digitalizzazione delle reti idriche: oltre 600 milioni per 21 progetti
Competenze e competitività
PNRR, così i fondi UE possono rilanciare la ricerca e l’Università
Finanziamenti
PNRR, si sbloccano i fondi per l’agrisolare
Sanità post-pandemica
PNRR, Missione Salute: a che punto siamo e cosa resta da fare
Strategie
Sovranità e autonomia tecnologica nazionale: come avviare un processo virtuoso e sostenibile
La relazione
Pnrr e PA digitale, l’alert della Corte dei conti su execution e capacità di spesa
L'editoriale
Elezioni 2022, la sfida digitale ai margini del dibattito politico
Strategie
Digitale, il monito di I-Com: “Senza riforme Pnrr inefficace”
Transizione digitale
Pnrr: arrivano 321 milioni per cloud dei Comuni, spazio e mobilità innovativa
L'analisi I-COM
Il PNRR alla prova delle elezioni: come usare bene le risorse e centrare gli obiettivi digitali
Cineca
Quantum computing, una svolta per la ricerca: lo scenario europeo e i progetti in corso
L'indice europeo
Desi, l’Italia scala due posizioni grazie a fibra e 5G. Ma è (ancora) allarme competenze
L'approfondimento
PNRR 2, ecco tutte le misure per cittadini e imprese: portale sommerso, codice crisi d’impresa e sismabonus, cosa cambia
Servizi digitali
PNRR e trasformazione digitale: ecco gli investimenti e le riforme previste per la digitalizzazione della PA
Legal health
Lo spazio europeo dei dati sanitari: come circoleranno le informazioni sulla salute nell’Unione Europea
Servizi digitali
PNRR e PA digitale: non dimentichiamo la dematerializzazione
Digital Healthcare transformation
La trasformazione digitale degli ospedali
Governance digitale
PA digitale, è la volta buona? Così misure e risorse del PNRR possono fare la differenza
Servizi digitali
Comuni e digitale, come usare il PNRR senza sbagliare
La survey
Pnrr e digitale accoppiata vincente per il 70% delle pmi italiane
Missione salute
Fascicolo Sanitario Elettronico alla prova del PNRR: limiti, rischi e opportunità
Servizi pubblici
PNRR: come diventeranno i siti dei comuni italiani grazie alle nuove risorse
Skill gap
PNRR, la banda ultra larga crea 20.000 nuovi posti di lavoro
Il Piano
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUMPA2022
PNRR e trasformazione digitale: rivedi i Talk di FORUM PA 2022 in collaborazione con le aziende partner
I contratti
Avio, 340 milioni dal Pnrr per i nuovi propulsori a metano
Next Generation EU
PNRR, a che punto siamo e cosa possono aspettarsi le aziende private
Fondi
Operativo il nuovo portale del MISE con tutti i finanziamenti per le imprese
Servizi comunali
Il PNRR occasione unica per i Comuni digitali: strumenti e risorse per enti e cittadini
Healthcare data platform
PNRR dalla teoria alla pratica: tecnologie e soluzioni per l’innovazione in Sanità
Skill
Competenze digitali, partono le Reti di facilitazione
Gli obiettivi
Scuola 4.0, PNRR ultima chance: ecco come cambierà il sistema formativo
Sistema Paese
PNRR 2, è il turno della space economy
FORUM PA 2022
FORUM PA 2022: la maturità digitale dei comuni italiani rispetto al PNRR
Analisi
PNRR: dalla Ricerca all’impresa, una sfida da cogliere insieme
Innovazione
Pnrr, il Dipartimento per la Trasformazione digitale si riorganizza
FORUM PA 2022
PA verde e sostenibile: il ruolo di PNRR, PNIEC, energy management e green public procurement
Analisi
PNRR, Comuni e digitalizzazione: tutto su fondi e opportunità, in meno di 3 minuti. Guarda il video!
Rapporti
Competenze digitali e servizi automatizzati pilastri del piano Inps
Analisi
Attuazione del PNRR: il dialogo necessario tra istituzioni e società civile. Rivedi lo Scenario di FORUM PA 2022
Progetti
Pnrr, fondi per il Politecnico di Torino. Fra i progetti anche IS4Aerospace
Analisi
PNRR, Colao fa il punto sulla transizione digitale dell’Italia: «In linea con tutte le scadenze»
La Svolta
Ict, Istat “riclassifica” i professionisti. Via anche al catalogo dati sul Pnrr
Analisi
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUM PA 2022
Ecosistema territoriale sostenibile: l’Emilia Romagna tra FESR e PNRR
Il Piano
Innovazione, il Mise “centra” gli obiettivi Pnrr: attivati 17,5 miliardi
Analisi
PNRR: raggiunti gli obiettivi per il primo semestre 2022. Il punto e qualche riflessione
Analisi
PNRR: dal dialogo tra PA e società civile passa il corretto monitoraggio dei risultati, tra collaborazione e identità dei luoghi
Webinar
Comuni e PNRR: un focus sui bandi attivi o in pubblicazione
Analisi
Formazione 4.0: cos’è e come funziona il credito d’imposta
PA e Sicurezza
PA e sicurezza informatica: il ruolo dei territori di fronte alle sfide della digitalizzazione
PA e sicurezza
PNRR e servizi pubblici digitali: sfide e opportunità per Comuni e Città metropolitane
Water management
Water management in Italia: verso una transizione “smart” e “circular” 
LE RISORSE
Transizione digitale, Simest apre i fondi Pnrr alle medie imprese
Prospettive
Turismo, cultura e digital: come spendere bene le risorse del PNRR
Analisi
Smart City: quale contributo alla transizione ecologica
Decarbonizzazione
Idrogeno verde, 450 milioni € di investimenti PNRR, Cingolani firma
Unioncamere
PNRR, imprese in ritardo: ecco come le Camere di commercio possono aiutare
I fondi
Industria 4.0: solo un’impresa su tre pronta a salire sul treno Pnrr

Articolo 1 di 2