ChatGPT falla: 13 errores y errores comunes que debes saber

He escrito sobre formas de usar ChatGPT para SEO y tareas relacionadas con el marketing de contenido, como investigación de palabras clave, creación de etiquetas de título y SEO local.

Lo uso al menos una vez al día para una variedad de tareas. Cuanto más utilice la plataforma, más valioso será para usted comprender sus limitaciones.

El fundador de OpenAI (la compañía que creó ChatGPT) calificó la herramienta de "increíblemente limitada" y de "producto horrible" y advirtió a los usuarios sobre cuánto confían en ella:

ChatGPT es increíblemente limitado, pero lo suficientemente bueno en algunas cosas como para crear una impresión engañosa de grandeza.

es un error confiar en él para algo importante en este momento. es una vista previa del progreso; tenemos mucho trabajo por hacer en cuanto a solidez y veracidad.

– Sam Altman (@sama) 11 de diciembre de 2022

Múltiples publicaciones han publicado contenido con errores en temas significativos de YMYL ("Tu dinero o tu vida") como finanzas personales y salud.

Este artículo analiza los errores técnicos más comunes y los errores frecuentes al usar ChatGPT y cómo abordarlos.

Errores comunes de ChatGPT

Si ha estado usando ChatGPT durante "mucho" tiempo (es decir, desde finales de 2022), probablemente haya visto el mensaje a continuación en algún momento.

Obviamente, un nuevo producto de software en un campo de tecnología emergente que es enormemente popular tendrá problemas.

Si está haciendo de ChatGPT una parte integral de su flujo de trabajo diario, es útil conocer los problemas comunes que puede encontrar.

ChatGPT también tiene problemas familiares para cualquier sitio web, como errores 404 no encontrados, errores internos del servidor 5xx, errores de acceso denegado 403 y errores de Cloudflare como errores 1020 y 524.

A menudo, estos pueden solucionarse borrando su caché, usando (o desactivando) una VPN o asegurándose de escribir la dirección web correctamente.

Y también hay varios errores más específicos de la plataforma:

1. Problemas de API

A menudo, los usuarios pueden alcanzar límites de caracteres específicos, límites de tokens o límites en la funcionalidad con la API de ChatGPT.

2. Límites de caracteres

Hay límites en cuanto a la cantidad de caracteres que puede ingresar en ChatGPT y la cantidad de caracteres que pueden tener las respuestas de ChatGPT.

Varían según su versión (p. ej., GPT-3.5 tiene un límite de entrada de 2048 y GPT-4 es de 4096) y en la interfaz web frente a la API.

3. Tiempo de espera de conexión en respuestas largas

Si ChatGPT está procesando una respuesta larga y compleja, a veces simplemente se agota el tiempo de espera.

Es posible que vea esto cuando le pida a la plataforma que realice funciones como escribir código o analizar y responder a entradas largas.

4. Respuestas inconclusas

No es un error per se, pero con frecuencia, si le pide a ChatGPT que escriba un código o un texto largo, simplemente se detendrá a mitad de camino.

Puede escribir continuar y terminará dentro de las próximas indicaciones en estos casos.

5. Mensajes limitados

ChatGPT, al momento de escribir, limita la cantidad de mensajes que puede usar por período de tiempo, incluso para cuentas pagas.

Del mismo modo, existe una limitación de tasa específica para diferentes versiones de GPT, herramientas de OpenAI y tipos de cuenta.

6. Problemas de inicio de sesión

Según el nivel de acceso requerido o la duración de la sesión. ChatGPT puede cerrar su sesión o es posible que no tenga acceso a ciertas funciones con ciertos estados de cuenta.

La mayoría de estos problemas se pueden resolver mediante:

• Reelaboración de sus indicaciones para ajustarse a los límites de caracteres.
• Asegúrate de haber iniciado sesión y poder acceder a la funcionalidad que intentas usar con el nivel de tu cuenta.
• Pedirle a ChatGPT que regenere las respuestas.
• Comenzando un nuevo chat.

Errores comunes de ChatGPT

ChatGPT comete muchos errores, entre ellos:

• Equivocarse en hechos verificables.
• Detallando un proceso que "supuestamente" usó para generar una respuesta que es imposible dadas las limitaciones de la plataforma.
• Generación de código roto.
• Formato roto o ignorando instrucciones en la salida.
• Y más.

Otros usuarios tienen instancias detalladas de la plataforma mintiendo para resolver un CAPTCHA y problemas con problemas matemáticos simples relacionados con la edad y la distancia.

Algo de esto ha mejorado con GPT-4, pero no todo. Aquí hay un aviso y una salida usando la última versión de ChatGPT:

Si bien es divertido hacer indicaciones de "te pillé" y atrapar a ChatGPT diciendo cosas incorrectas o tontas, es más beneficioso estar al tanto de las áreas en las que ChatGPT puede estar equivocado, las "categorías de error", por así decirlo.

Comprenderlos lo convertirá en un mejor ingeniero de avisos y editor de resultados. Repasemos las categorías más comunes de errores que conozco.

7. Confiado pero equivocado

El problema de la "alucinación" es un problema importante para ChatGPT y otras soluciones de IA generativa.

ChatGPT responderá a todo tipo de preguntas para las que no sabe la respuesta de una manera convincente. Eso no hace que la respuesta sea correcta.

La captura de pantalla de ejemplo anterior muestra que no utiliza ningún lenguaje de calificación o cobertura en absoluto. Obtienes una respuesta decisiva sin equívocos.

8. No entender el conteo de palabras y caracteres

ChatGPT es terrible para estimar y comprender el recuento de caracteres de forma precisa.

Si está haciendo un trabajo relacionado con SEO y contenido, este es un factor limitante importante. Es posible que esté buscando escribir etiquetas de título, meta descripciones o contenido donde sea necesario cumplir con un recuento de palabras:

Esto es realmente bastante cerca. He tenido casos en los que la herramienta estaba mucho más lejos.

9. Errores de razonamiento

Busqué "rompecabezas de lógica" y tomé la primera lista de "rompecabezas de lógica fáciles" que encontré.

ChatGPT resolvió correctamente los primeros tres acertijos, luego el cuarto falló:

10. Errores de codificación

Ahora hay varios ejemplos de la vida real de personas que usan ChatGPT para crear sitios web, aplicaciones y extensiones de navegador o solucionar problemas de codificación.

Dicho esto, ChatGPT también puede generar código que no funciona. He encontrado los siguientes problemas al usar ChatGPT para ayudar con el código:

• El código simplemente no funciona correctamente. (Acciones que no se ejecutan cuando los usuarios usan una herramienta).
• Los cálculos creados por el código de ChatGPT son incorrectos.
• Usar la API incorrecta. (A menudo, es porque no conoce la API que desea usar porque la API salió o se actualizó después del período de datos de capacitación para GPT, que finalizó a fines de 2021. A pesar de esto, ChatGPT no le informa. )
• Ignorar u “olvidar” instrucciones y requisitos o restricciones del proyecto.

Nuevamente, es imperativo que siempre verifique cuidadosamente el código que está implementando y pruebe el resultado de cualquier cosa con la que ChatGPT ayude.

Algunos usuarios también han informado que GPT-4 o incluso el modo heredado (en lugar del nuevo modo predeterminado, Turbo) conduce a mejores resultados para las tareas de codificación.

11. Información desactualizada

Los datos de entrenamiento para ChatGPT pueden actualizarse en algún momento y varios complementos y herramientas han comenzado a integrar el rastreo web y los datos en tiempo real.

Aún así, la versión web de ChatGPT actualmente no puede rastrear la web y no tiene conocimiento de la información anterior a finales de 2021.

Esto es importante, particularmente cuando se combina con el problema de "seguro pero equivocado".

12. Memoria corta

Existe un límite en la cantidad de caracteres dentro de un chat que ChatGPT "recordará", por lo que con frecuencia cometerá errores debido a la pérdida del contexto de sus primeras indicaciones o sus primeras respuestas.

13. Errores de formato

Al igual que con la codificación, si le pide a ChatGPT que realice funciones como crear una tabla o formatear texto de cierta manera, a veces cometerá errores o ignorará instrucciones específicas.

Evitar y abordar los errores de ChatGPT

Entonces, ¿cómo puede aprovechar al máximo ChatGPT mientras lidia con los problemas y limitaciones de la plataforma?

Centrarse en estas áreas clave puede ayudarlo a evitar muchas de las posibles desventajas de usar ChatGPT en sus tareas diarias:

Sea consciente de las limitaciones

Mantenerse actualizado con las limitaciones específicas del producto como (es decir, límites de caracteres para mensajes y respuestas, la fecha de los datos de entrenamiento para GPT, etc.) lo ayudará a diseñar mensajes que generen buenas respuestas y mejores resultados de control de calidad.

OpenAI hace un buen trabajo al actualizar esta información con nuevos lanzamientos. Algunos elementos aquí son cosas que han dicho explícitamente que están abordando.

Revise y edite los resultados cuidadosamente

Esto debería ser bastante obvio, pero debe editar cuidadosamente cualquier texto y código de control de calidad antes de publicarlo o implementarlo.

Debido a la confianza tan convincente que puede tener ChatGPT, recomiendo encarecidamente que un experto en el dominio revise el contenido y el código antes de implementarlo.

Es relativamente fácil dejarse engañar por parte del contenido y las afirmaciones de ChatGPT, especialmente si un tema no es su área de especialización.

Pero si tiene una gran experiencia en un tema, es más fácil detectar declaraciones engañosas o inexactas.

Capas de herramientas y procesos sobre la API

OpenAI ha implementado complementos y ha puesto a disposición una API específica de ChatGPT.

Puede abordar algunas de las limitaciones de la plataforma utilizando diferentes herramientas que otros crean o creando algunas usted mismo.

Ahora que conoce los peligros potenciales de ChatGPT, puede continuar y establecer medidas de seguridad para usar la herramienta, aprovechando sus beneficios y evitando muchos de los aspectos negativos.