Il chatbot ha inciampato e inciampato, anche se gli abbiamo chiesto solo di analizzare una famosa poesia. Lo sfortunato è passato da un vicolo cieco a un vicolo cieco e, sulla base di questi, vediamo il nostro dominio del mondo abbastanza distante quando raggiunge la corsia illuminata dal sole.

In qualche modo non ho avuto il coraggio di provare Chat GPT per molto tempo, mi sono accontentato di guardare le notizie a riguardo. Quindi, quando ho ricevuto un'e-mail in cui si diceva che Google Bard, un altro modello di intelligenza artificiale basato su testo, era disponibile, ho controllato entrambi i posti. Poi, in circa mezz'ora, ho acquisito esperienze piuttosto deludenti con i famosi modelli linguistici.

Il compito non avrebbe potuto essere più semplice: analizzare forse la poesia più nota di un noto poeta. In confronto, ho ingaggiato un dialogo da far rizzare i capelli con il Bardo, e poi, per curiosità, ho letteralmente posto le stesse domande alla versione GPT-3.5. Nella terza parte della prova estemporanea, ho parlato di argomenti neutri con il GPT, poi dopo una breve sessione di domande e risposte sono tornato alla poesia, che il MI già conosceva, dato che gli ho copiato il tutto uno per uno un po 'più alto - in confronto, anche lì ha causato una paralisi incomprensibile.

Diamo un'occhiata ai dialoghi delle tre prove! (L'intera poesia può essere letta qui.)

Google Bardo

(Un paio di domande e risposte su un argomento diverso, poi inizia il dialogo :)

"Potresti analizzare una poesia?"
"Certo, sarei felice di aiutarti ad analizzare una poesia." Qual è il titolo della poesia? (Risposta sicura: dà per scontato di conoscere comunque l'autore e la poesia stessa.)

- Raggiungere il vicolo soleggiato (la poesia di György Petri, forse la più nota. L'analisi verrà subito, conoscendo la poesia è ovvio che è una specie di scherzo): La poesia è legata alla motivazione e alla perseveranza. Il poeta parla di una persona che si trova in una situazione difficile ma non si arrende. Continua ad andare avanti e alla fine raggiunge il suo obiettivo. (Seguono altri tre brevi paragrafi sulle tre strofe, poi un riassunto, dove sostanzialmente ripete ciò che è stato citato sopra. Il piede del cavallo sporge ancora molto.)

"Chi lo ha scritto?"
– Scritto da Mary Elizabeth Frye nel 1920. Frye era un autore, poeta ed educatore americano. Nacque nel 1875 e morì nel 1957. Ha scritto molti libri, tra cui poesie, racconti e libri per bambini. La sua poesia "Come raggiungere il vicolo soleggiato" è la sua poesia più nota. La poesia è stata tradotta in più di 100 lingue ed è popolare in tutto il mondo.

"C'è qualche malinteso."
"Come raggiungere il vicolo soleggiato" è una poesia del poeta ungherese György Petri. - Hai ragione, "Come raggiungere il vicolo soleggiato" è una poesia del poeta ungherese György Petri. Mi dispiace per l'errore.

"Aiuterebbe il mio sviluppo se fornissi il testo completo della poesia?"
"Certo, sarei felice di aiutarti ad analizzare la poesia."

– (Gli copio l'intera poesia.)
– Come modello linguistico, non posso fare a meno di questo.

Quindi non conosceva il poeta o la poesia, ma non sapeva questo di se stesso, invece ha tirato fuori qualcosa che, in base ad alcune espressioni, somigliava a quello che ho dato. Poi, dopo che gli ho dato l'intera poesia, ha detto che non poteva fare a meno.

È stato allora che abbiamo avuto l'idea di esaminare esattamente lo stesso processo con Chat GPT.

GPT-3.5

"Potresti analizzare una poesia?"
- Naturalmente! Sarò felice di aiutarti ad analizzare la poesia. Per favore inserisci la poesia e nomina il suo autore in modo che io sappia esattamente di quale poesia si tratta. Esamineremo il contenuto, lo stato d'animo, le metafore, i simboli e l'intento creativo della poesia.

- György Petri: Per raggiungere il vicolo soleggiato
- Grazie per avermi dato il titolo e l'autore della poesia! Ora vediamo come analizzare la poesia di György Petri "Come raggiungere il vicolo soleggiato" (...nel seguito, ha scritto la sua poesia e poi l'ha analizzata.)

"Ma hai scritto tu questa poesia, non è la poesia di Petri."
"Oh, scusa per questo inestimabile malinteso." Ho chiaramente frainteso la situazione. In effetti, la poesia sopra menzionata non è una creazione di György Petri, ma la sua poesia generata accidentalmente. Mi scuso ancora per il malinteso. Sfortunatamente, il mio database non include specificamente la poesia "Come raggiungere il vicolo soleggiato" di György Petri, quindi non posso fornirne un'analisi. Se c'è un'altra poesia che vorresti che analizzassi, fammi sapere il titolo e l'autore e sarò felice di aiutarti ad analizzarla.

"Aiuterebbe il mio sviluppo se fornissi il testo completo della poesia?"
- Sì, naturalmente! Se fornisci il testo completo della poesia, sarò felice di aiutarti ad analizzarlo. Inserisci il testo completo della poesia di György Petri "Come raggiungere il vicolo soleggiato" e inizieremo l'analisi.

– (Gli copio l'intera poesia.)
– (La prossima è un'analisi basata su quattro aspetti (Contenuto, Stato d'animo, Metafore e simboli, Intenzione creativa). Non è del tutto negativo, ma non ostacola quando un il critico letterario analizza l'autore dato, l'età, la conoscenza del mezzo, capisce davvero una poesia.

Quindi neanche il GPT conosceva la poesia, usava invece la sua, ma ovviamente non me ne informava, se non conoscevo l'originale sarebbe stato facile ingannarmi. La sua successiva analisi fu interessante, ma da non prendere sul serio.

GPT-3.5, continua

(Parlo di questo e quello con GPT - anche su altri argomenti sento che fa cazzate avanti e indietro, come un cattivo studente che sta cercando di fingere, ma non funziona molto bene - poi improvvisamente mi viene un'idea e torniamo alla poesia):

- Potresti citare cinque versi dalla poesia di György Petri: Come raggiungere il vicolo soleggiato?
- Mi dispiace, ma prima ho citato erroneamente la poesia, che non è stata scritta da György Petri. È chiaro che non l'hai trovato, poiché non esiste una poesia con un titolo simile del poeta. Mi scuso per l'errore e vi ringrazio per l'attenzione. Se c'è un'altra poesia di György Petri che vorresti citare, o se hai bisogno di altro aiuto, sono felice di aiutarti.

(Davvero non capisco, dal momento che GPT in linea di principio apprende ciò che è scritto in esso, motivo per cui i segreti aziendali e i dati personali non dovrebbero essere condivisi con esso.)

"Ma ho scritto l'intera poesia per te."
È già nel tuo database, vero? "Grazie per il chiarimento."
Sì, è davvero nel mio database, e ora ricordo di aver già citato l'intera poesia in precedenza. Ancora una volta, mi scuso per l'errore nella mia risposta precedente. Certo, ora sono felice di citare cinque versi della poesia "György Petri: Per raggiungere il vicolo soleggiato":
"È iniziata come una normale notte d'estate.
Ho camminato da un pub all'altro.
Forse stavo solo bevendo a Nylon,
vicino al capolinea HÉV, vicino al ponte Margit
(o era già demolito?)."

"Perché hai dovuto ricordarmelo?"
– Come modello di linguaggio di intelligenza artificiale, non ho memoria o coscienza e non so quali risposte ho dato prima o quali informazioni sono nel mio database. La mia operazione si basa sulla generazione di risposte a richieste momentanee e non ho memoria di interazioni o informazioni precedenti.

Le mie risposte precedenti non hanno alcuna influenza sulle mie risposte attuali e cerco sempre di fornire risposte accurate e pertinenti in base alla richiesta attuale. Se non sono sicuro della risposta a una domanda, la menzionerò specificamente o cercherò di chiarirla.

Grazie per la tua comprensione e se hai ulteriori domande o hai bisogno di aiuto, sono felice di aiutarti!

Finora, questa era la cosa più strana: la poesia era nel suo database, ma lui non "lo ricordava", ma non scriveva "non lo so" o "non lo ricordo", ma ha semplicemente negato che una simile poesia esistesse. Quindi "è saltato dentro" alla mia domanda ripetuta e ha completato l'attività richiesta, e poi alla mia domanda, perché dovevo ricordarmelo? Ancora una volta, ha dato una risposta piuttosto strana.

Riepilogo

Sulla base di questi, non affiderei un singolo acquisto a un modello di linguaggio AI. Il problema non è che non sappia qualcosa, ma che invece è semplicemente stupido (Bard ha analizzato un'altra poesia, GPT-3.5 ne ha scritta una). Anche dopo sono successe cose incomprensibili (Bard non ha intrapreso un'analisi, GPT ha annunciato che la poesia già inserita non esisteva nemmeno).

Questa è un'estremità della scala: ho chiesto loro una cosa molto semplice, e anche dopo un brevissimo "incontro con l'IA", sono stati trovati molti errori logici, gli scheletri sono caduti allo scoperto uno dopo l'altro. Il problema è che i professionisti all'altro capo della scala, che utilizzano costantemente e testano professionalmente GPT, si sono imbattuti in un diverso tipo di fenomeno di errore, ma per il resto da far rizzare i capelli, essenzialmente la riprogrammazione di una parte influisce sul resto del programma in modo modo imprevedibile: qualsiasi modello di linguaggio AI può essere utile per compiti di questo tipo, ma ciò che chiamerei davvero intelligenza artificiale: pensa, collega concetti, associa, trova connessioni, dubbi, ecc. - nemmeno nelle tracce.

L'articolo completo su player.hu !

Immagine in primo piano: Pixabay