ChatGPT fallisce: 13 errori comuni ed errori che devi conoscere

Ho scritto sui modi per utilizzare ChatGPT per la SEO e le attività relative al marketing dei contenuti, come la ricerca di parole chiave, la creazione di tag del titolo e la SEO locale.

Lo uso almeno una volta al giorno per una varietà di attività. Più usi la piattaforma, più prezioso sarà per te comprenderne i limiti.

Il fondatore di OpenAI (la società che ha creato ChatGPT) ha definito lo strumento "incredibilmente limitato" e un "prodotto orribile" e ha messo in guardia gli utenti su quanto fanno affidamento su di esso:

ChatGPT è incredibilmente limitato, ma abbastanza bravo in alcune cose da creare un'impressione fuorviante di grandezza.

è un errore fare affidamento su di esso per qualcosa di importante in questo momento. è un'anteprima del progresso; abbiamo molto lavoro da fare sulla solidità e veridicità.

— Sam Altman (@sama) 11 dicembre 2022

Diverse pubblicazioni hanno pubblicato contenuti con errori su argomenti YMYL ("I tuoi soldi o la tua vita") significativi come la finanza personale e la salute.

Questo articolo discute gli errori tecnici più comuni e gli errori frequenti durante l'utilizzo di ChatGPT e come risolverli.

Errori comuni di ChatGPT

Se usi ChatGPT da "lungo" tempo (ad esempio, dalla fine del 2022), probabilmente hai visto il prompt qui sotto ad un certo punto.

Ovviamente, un nuovo prodotto software in un campo tecnologico emergente che è molto popolare incontrerà dei problemi.

Se stai rendendo ChatGPT parte integrante del tuo flusso di lavoro quotidiano, è utile conoscere i problemi comuni che potresti incontrare.

ChatGPT presenta anche problemi familiari a qualsiasi sito Web, come errori 404 non trovati, errori del server interno 5xx, errori di accesso negato 403 ed errori Cloudflare come errori 1020 e 524.

Spesso questi possono essere risolti svuotando la cache, utilizzando (o disattivando) una VPN o assicurandosi di digitare correttamente l'indirizzo web.

E ci sono anche diversi errori più specifici per la piattaforma:

1. Problemi con l'API

Spesso, gli utenti possono raggiungere limiti di caratteri specifici, limiti di token o limiti di funzionalità con l'API ChatGPT.

2. Limiti di caratteri

Ci sono limiti al numero di caratteri che puoi inserire in ChatGPT e al numero di caratteri che possono essere le risposte di ChatGPT.

Variano a seconda della versione (ad esempio, GPT-3.5 ha un limite di input di 2048 e GPT-4 è 4.096) e nell'interfaccia Web rispetto all'API.

3. Timeout della connessione in caso di risposte lunghe

Se ChatGPT sta elaborando una risposta lunga e complessa, a volte scadrà semplicemente.

Potresti vederlo quando chiedi alla piattaforma di eseguire funzioni come scrivere codice o analizzare e rispondere a input lunghi.

4. Risposte incompiute

Non è un errore di per sé, ma spesso, se chiedi a ChatGPT di scrivere codice o un testo lungo, si fermerà a metà strada.

Puoi digitare continua e finirà entro i prossimi prompt in questi casi.

5. Messaggi limitati

ChatGPT, al momento in cui scriviamo, limita il numero di messaggi che puoi utilizzare per periodo di tempo, anche per gli account a pagamento.

Allo stesso modo, esiste un limite di velocità specifico per diverse versioni GPT, strumenti OpenAI e tipi di account.

6. Problemi di accesso

A seconda del livello di accesso richiesto o della durata della sessione. ChatGPT potrebbe disconnetterti o potresti non avere accesso a determinate funzionalità con determinati stati dell'account.

La maggior parte di questi problemi può essere risolta:

• Rielaborare i tuoi suggerimenti per adattarli ai limiti di caratteri.
• Assicurati di aver effettuato l'accesso e di poter accedere alla funzionalità che stai tentando di utilizzare a livello di account.
• Chiedere a ChatGPT di rigenerare le risposte.
• Avvio di una nuova chat.

Errori comuni di ChatGPT

ChatGPT commette molti errori, tra cui:

• Sbagliare fatti verificabili.
• Descrivendo in dettaglio un processo "presumibilmente" utilizzato per generare una risposta impossibile dati i limiti della piattaforma.
• Generazione di codice rotto.
• Formattazione interrotta o istruzioni ignorate nell'output.
• E altro ancora.

Altri utenti hanno istanze dettagliate della piattaforma che mente per risolvere un CAPTCHA e problemi con semplici problemi matematici relativi all'età e alla distanza.

Alcuni di questi sono migliorati con GPT-4, ma non tutti. Ecco un prompt e un output utilizzando l'ultima versione di ChatGPT:

Anche se è divertente ricevere suggerimenti "gotcha" e sorprendere ChatGPT a dire cose errate o sciocche, è più vantaggioso essere consapevoli delle aree in cui ChatGPT può sbagliare: le "categorie di errori", se vuoi.

La comprensione di questi ti renderà sia un ingegnere di prompt che un editor di output migliori. Passiamo attraverso le categorie più comuni di errori che conosco.

7. Fiducioso ma sbagliato

Il problema delle "allucinazioni" è un problema significativo per ChatGPT e altre soluzioni di intelligenza artificiale generativa.

ChatGPT risponderà a tutti i tipi di domande a cui non conosce la risposta in modo convincente. Questo non rende giusta la risposta.

Lo screenshot di esempio sopra mostra che non utilizza alcun linguaggio qualificante o copertura. Ottieni una risposta decisiva senza equivoci.

8. Non capire il conteggio delle parole e dei caratteri

ChatGPT è pessimo nello stimare e comprendere il conteggio dei caratteri in modo preciso.

Se stai svolgendo un lavoro relativo alla SEO e ai contenuti, questo è un importante fattore limitante. Potresti voler scrivere tag del titolo, meta descrizioni o contenuti in cui è necessario rispettare un conteggio delle parole:

Questo è in realtà abbastanza vicino. Ho avuto casi in cui lo strumento era molto più lontano.

9. Errori di ragionamento

Ho cercato "puzzle logici" e ho preso il primo elenco di "puzzle logici facili" che ho trovato.

ChatGPT ha corretto i primi tre puzzle, poi il quarto sbagliato:

10. Errori di codifica

Ora ci sono diversi esempi di vita reale di persone che utilizzano ChatGPT per creare siti Web, app ed estensioni del browser o risolvere problemi di codifica.

Detto questo, ChatGPT può anche generare codice che non funziona. Ho riscontrato i seguenti problemi durante l'utilizzo di ChatGPT per aiutare il codice:

• Il codice semplicemente non funziona correttamente. (Azioni non eseguite quando gli utenti utilizzano uno strumento.).
• I calcoli creati dal codice di ChatGPT non sono corretti.
• Utilizzo dell'API sbagliata. (Spesso, è perché non è a conoscenza dell'API che desideri utilizzare perché l'API è uscita o è stata aggiornata dopo il periodo di addestramento dei dati per GPT, terminato alla fine del 2021. Nonostante ciò, ChatGPT non te lo fa sapere. )
• Ignorare o "dimenticare" istruzioni e requisiti o vincoli del progetto.

Ancora una volta, è imperativo controllare sempre attentamente il codice che stai implementando e testare l'output di qualsiasi cosa ChatGPT ti aiuti.

Alcuni utenti hanno anche segnalato che GPT-4 o anche la modalità legacy (piuttosto che il nuovo predefinito, Turbo) porta a risultati migliori per le attività di codifica.

11. Informazioni obsolete

I dati di addestramento per ChatGPT potrebbero essere aggiornati a un certo punto e vari plug-in e strumenti hanno iniziato a integrare il web crawling e i dati in tempo reale.

Tuttavia, la versione web di ChatGPT attualmente non è in grado di eseguire la scansione del Web e non è a conoscenza delle informazioni precedenti alla fine del 2021.

Questo è importante, in particolare se abbinato alla questione "fiducioso ma sbagliato".

12. Memoria corta

C'è un limite al numero di caratteri all'interno di una chat che ChatGPT "ricorderà", quindi commetterà spesso errori a causa della perdita del contesto dei tuoi primi prompt o delle sue prime risposte.

13. Errori di formattazione

Come per la codifica, se chiedi a ChatGPT di eseguire funzioni come la creazione di una tabella o la formattazione del testo in un certo modo, a volte commetterà errori o ignorerà istruzioni specifiche.

Evitare e affrontare gli errori di ChatGPT

Quindi, come puoi ottenere il massimo da ChatGPT affrontando i problemi e i limiti della piattaforma?

Concentrarsi su queste aree chiave può aiutarti a evitare gran parte del potenziale svantaggio dell'utilizzo di ChatGPT nelle tue attività quotidiane:

Sii consapevole dei limiti

Rimanere aggiornati con limitazioni specifiche del prodotto come (ad esempio, limiti di caratteri per prompt e risposte, data dei dati di addestramento per GPT, ecc.) ti aiuterà a creare prompt che generano risposte migliori e risultati QA migliori.

OpenAI fa un buon lavoro nell'aggiornare queste informazioni con le nuove versioni. Alcuni elementi qui sono cose che hanno detto esplicitamente che stanno affrontando.

Esamina e modifica attentamente gli output

Questo dovrebbe essere abbastanza ovvio, ma è necessario modificare attentamente qualsiasi testo e codice QA prima di pubblicarlo o distribuirlo.

A causa della sicurezza convincente di ChatGPT, consiglio vivamente di far esaminare il contenuto e il codice da un esperto di dominio prima che venga distribuito.

È relativamente facile essere ingannati da alcuni contenuti e affermazioni diffusi da ChatGPT, soprattutto se un argomento non è la tua area di competenza.

Ma se hai una profonda esperienza su un argomento, è più facile cogliere affermazioni fuorvianti o imprecise.

Stratifica strumenti e processi sopra l'API

OpenAI ha implementato plug-in e reso disponibile un'API specifica per ChatGPT.

Puoi risolvere alcuni dei limiti della piattaforma utilizzando diversi strumenti creati da altri o creandone alcuni tu stesso.

Ora che conosci le potenziali insidie ​​di ChatGPT, puoi andare avanti e stabilire barriere per l'utilizzo dello strumento, sfruttando i suoi vantaggi evitando molti degli aspetti negativi.