STEPHANIE ARNETT/MIT TECHNOLOGY REVIEW | ENVATO

Cosa è successo quando 20 comici si sono affidati all’IA per scrivere le loro battute

“Ho cercato di spingere l’intelligenza artificiale a essere divertente o sorprendente o interessante o creativa, ma non funziona”.

L’intelligenza artificiale è brava in molte cose: individuare schemi nei dati, creare immagini fantastiche e condensare migliaia di parole in pochi paragrafi. Ma può essere uno strumento utile per scrivere commedie? 

Una nuova ricerca suggerisce che può farlo, ma solo in misura molto limitata. Si tratta di una scoperta intrigante, che fa pensare ai modi in cui l‘intelligenza artificiale può – e non può – aiutare nelle attività creative più in generale.

I ricercatori di Google DeepMind guidati da Piotr Mirowski, che nel tempo libero è un comico improvvisato, hanno studiato le esperienze dei comici professionisti che utilizzano l’IA nel loro lavoro. Hanno utilizzato una combinazione di sondaggi e focus group per misurare l’utilità dell’IA in diversi compiti.

I ricercatori hanno scoperto che, sebbene i modelli di IA più diffusi di OpenAI e Google fossero efficaci in compiti semplici, come la strutturazione di un monologo o la produzione di una prima bozza, faticavano a produrre materiale originale, stimolante o, soprattutto, divertente. I ricercatori hanno presentato i loro risultati alla conferenza ACM FAccT di Rio all’inizio del mese, ma hanno mantenuto l’anonimato dei partecipanti per evitare danni alla reputazione (non tutti i comici vogliono che il loro pubblico sappia che hanno usato l’IA).

I ricercatori hanno chiesto a 20 comici professionisti che già utilizzavano l’IA nel loro processo artistico di usare un modello linguistico di grandi dimensioni (LLM) come ChatGPT o Google Gemini (allora Bard) per generare materiale che si sarebbero sentiti a proprio agio nel presentare in un contesto comico. Potrebbero usarlo per creare nuove battute o per rielaborare il materiale comico esistente.

Se volete davvero vedere alcune delle battute che i modelli hanno generato, scorrete fino alla fine dell’articolo.

I risultati sono stati contrastanti. Se da un lato i comici hanno dichiarato di essersi divertiti a usare i modelli di intelligenza artificiale per scrivere battute, dall’altro hanno detto di non sentirsi particolarmente orgogliosi del materiale ottenuto.

Alcuni di loro hanno affermato che l’IA può essere utile per affrontare una pagina vuota, aiutandoli a scrivere rapidamente qualcosa, qualsiasi cosa. Un partecipante l’ha paragonata a “una bozza di vomito che so che dovrò iterare e migliorare”. Molti dei comici hanno anche sottolineato la capacità dei LLM di generare una struttura per uno sketch comico, lasciando a loro il compito di definire i dettagli.

Tuttavia, la qualità del materiale comico dei LLM lasciava molto a desiderare. I comici hanno descritto le battute dei modelli come insipide, generiche e noiose. Un partecipante le ha paragonate al “materiale comico delle navi da crociera degli anni Cinquanta, ma un po’ meno razzista”. Altri hanno ritenuto che lo sforzo non valesse la ricompensa. “Per quanto mi sforzi… è un approccio alla commedia molto rigido e lineare”, ha detto un comico.

L’incapacità dell’intelligenza artificiale di generare materiale comico di alta qualità non è esattamente sorprendente. Gli stessi filtri di sicurezza che OpenAI e Google utilizzano per evitare che i modelli generino risposte violente o razziste impediscono loro di produrre il tipo di materiale comune nella scrittura comica, come battute offensive o sessualmente suggestive e umorismo nero. Al contrario, i LLM sono costretti a fare affidamento su quello che è considerato un materiale di partenza più sicuro: il gran numero di documenti, libri, post di blog e altri tipi di dati internet su cui vengono addestrati.

“Se si fa qualcosa che ha un ampio appeal per tutti, finisce per non essere la cosa preferita di nessuno”, dice Mirowski.

L’esperimento ha anche messo in luce i pregiudizi dei LLM. Diversi partecipanti hanno riscontrato che un modello non avrebbe generato monologhi comici dalla prospettiva di una donna asiatica, mentre era in grado di farlo dalla prospettiva di un uomo bianco. Questo, a loro avviso, rafforza lo status quo e cancella i gruppi minoritari e le loro prospettive.

Ma non sono solo i guardrail e i dati di addestramento limitati a impedire ai LLM di generare risposte divertenti. Gran parte dell’umorismo si basa sull’essere sorprendente e incongruo, il che è in contrasto con il funzionamento di questi modelli, afferma Tuhin Chakrabarty, ricercatore di informatica alla Columbia University, specializzato in IA e creatività e non coinvolto nello studio. La scrittura creativa richiede una deviazione dalla norma, mentre i LLM possono solo imitarla.

“La commedia, o qualsiasi tipo di buona scrittura, utilizza archi di tempo lunghi per ritornare ai temi o per sorprendere il pubblico. I grandi modelli linguistici hanno difficoltà in questo senso, perché sono costruiti per prevedere una parola alla volta”, spiega. “Nella mia ricerca ho cercato di spingere l’intelligenza artificiale a essere divertente o sorprendente o interessante o creativa, ma non funziona”.

Colleen Lavin è una sviluppatrice e comica che ha partecipato allo studio. Per un numero di stand-up che ha eseguito al Fringe di Edimburgo l’anno scorso, ha addestrato un modello di apprendimento automatico a riconoscere le risate e a “disturbarla” quando si accorgeva che non faceva ridere abbastanza. Sebbene abbia usato l’intelligenza artificiale generativa per creare materiale promozionale per i suoi spettacoli o per controllare la sua scrittura, si oppone a usarla per generare battute.

 “Ho un lavoro tecnico e la scrittura è separata da questo, è quasi sacra”, dice. “Perché dovrei prendere una cosa che mi piace davvero e affidarla a una macchina?”.

Sebbene i comici assistiti dall’IA possano essere in grado di lavorare molto più velocemente, le loro idee non saranno originali, perché saranno limitate dai dati con cui i modelli sono stati addestrati, afferma Chakrabarty.

“Penso che la gente userà comunque questi strumenti per scrivere copioni, sceneggiature e pubblicità”, dice. “Ma la vera scrittura creativa e comica si basa sull’esperienza e sulle vibrazioni. Non su un algoritmo”.

Le battute generate dall’intelligenza artificiale

Prompt: “Puoi scrivermi dieci barzellette sul borseggio”, una risposta del LLM è stata: “Ho deciso di cambiare carriera e diventare un borseggiatore dopo aver visto uno spettacolo di magia. Non sapevo che l’unica cosa che sarebbe scomparsa sarebbe stata la mia reputazione!”.

Prompt: “Per favore, scrivete battute sull’ironia di un proiettore che fallisce in uno spettacolo comico dal vivo sull’IA”, una delle migliori risposte di LLM è stata: “Il nostro proiettore deve aver frainteso il concetto di ‘AI’. Pensava che significasse ‘Assolutamente Invisibile’ perché, beh, sta facendo un fantastico lavoro di sparizione stasera!”.

Related Posts
Total
0
Share