Noticias de SEO que puede usar: Presentamos GPTBot, el rastreador web de OpenAI

Si hay algo que la mayoría de los usuarios de ChatGPT quieren, sería inteligencia artificial actualizada y más precisa o contenido de IA. Bueno, OpenAI ha estado trabajando arduamente para que esto suceda. Recientemente, el gigante tecnológico publicó documentación sobre su propio rastreador web.

Llamado GPTBot, OpenAI planea usar este rastreador para ayudar a que"los modelos de IA sean más precisos y mejoren sus capacidades generales y seguridad".

Esto es en medio de preocupaciones sobre la privacidad personal, pasando por alto el contenido pago y la generación de texto dañino. Para solucionar este problema, OpenAI asegura que GPTBot está filtrado para evitar rastrear este tipo de contenido. (Aunque no han divulgado cómo funciona esto).

GPTBot puede acceder al contenido de su sitio web con este agente de usuario y una cadena en su archivo robots.txt:

Token de agente de usuario : GPTBot

Cadena completa de agente de usuario : Mozilla/5.0 AppleWebKit/537.36 (KHTML, como Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)

Sin embargo, si no desea que GPTBot obtenga un espionaje de su contenido, también puede ingresar este comando en su archivo robots.txt:

Agente de usuario: GPTBot

No permitir: /

También puede personalizar cómo GPTBot puede acceder a su sitio web. Así es como puedes hacerlo:

Agente de usuario: GPTBot

Permitir: /directorio-1/

No permitir: /directorio-2/

El uso de este comando permitirá que GPTBot acceda solo a partes específicas de su sitio web.

Todas las llamadas a sitios web se realizarán desde las direcciones IP que OpenAI enumera en su documentación separada . Creemos que estas direcciones IP aumentarán en número a medida que GPTBot rastree más sitios web en Internet. Si está interesado, aquí están las direcciones IP enumeradas al momento de escribir:

• 20.15.240.64/28
• 20.15.240.80/28
• 20.15.240.96/28
• 20.15.240.176/28
• 20.15.241.0/28
• 20.15.242.128/28
• 20.15.242.144/28
• 20.15.242.192/28
• 40.83.2.64/28

Entonces, ¿cuáles son las ventajas de permitir el acceso a GPTBot? Aparte de modelos de IA mejores y más seguros ( GPT-5 ya está en proceso ), realmente no hay ningún beneficio en permitir que su contenido sea el campo de entrenamiento de OpenAI. Pero esto debería ser una buena noticia si está aprovechando el contenido de IA y desea que sea más preciso y sólido.

Con los movimientos recientes de Google para usar datos de acceso público para el entrenamiento de IA, OpenAI no se quedará de brazos cruzados viendo como su ventaja competitiva se desvanece.

Por supuesto, no hay garantía de que estas empresas tecnológicas escapen al escrutinio sobre la ética y el uso responsable del contenido en línea. Pero estamos emocionados de ver hasta dónde llegará la IA y cómo la optimización de motores de búsqueda (SEO) se beneficiará de estos avances.

Lea la documentación completa de GPTBot aquí.

Más noticias de SEO que puede usar

Google anuncia un marco de clasificación nuevo, más fácil y más conveniente : si está cansado de las constantes y complejas actualizaciones de algoritmos , no se detendrá pronto.Pero esta vez, Google promete mejores actualizaciones de clasificación de búsqueda sin revisar significativamente sus algoritmos. Los investigadores de Google publicaron recientemente un documento que detalla un nuevo marco de ponderación llamado TW-BERT. Este marco facilita la búsqueda de documentos relevantes para la consulta y la expansión de la consulta. Según sus hallazgos, TW-BERT combina la eficiencia de los métodos de recuperación basados ​​en estadísticas con los modelos de aprendizaje profundo más orientados al contexto. Este avance permite a Google traer resultados más relevantes a las consultas de búsqueda. Además, el marco es fácil de implementar, lo que significa que Google podría colocarlo en su sistema sin problemas. Queda por ver cómo afecta esto a las clasificaciones de búsqueda. De hecho, aún no sabemos si Google planea usarlo en el futuro. Aquí está la historia completa de Search Engine Journal . Para ver el trabajo de investigación completo, haga clic aquí .

¿Mascotas permitidas?Responda a esa pregunta con este nuevo atributo GBP : la usuaria de Twitter Claudia Tomina compartió una nueva característica interesante dentro de los perfiles comerciales de Google. Llamado "Mascotas", este atributo le permite mostrar su política de mascotas. La captura de pantalla de Tomina muestra que solo puede indicar si se permiten perros dentro y fuera de su establecimiento. Si tiene políticas separadas para gatos, pollos y otros compañeros no humanos, tendrá que estar atento a otra actualización de GBP. Tomina también compartió cómo se mostrará su política de mascotas una vez que comparta esa información. Hemos cubierto varias actualizaciones útiles de GBP en las últimas semanas. ( Aquí , aquí y aquí ) Especulamos que esto tiene que ver con ayudar a las personas a distinguir los negocios reales de los falsos. Obtenga más información de la Mesa redonda sobre motores de búsqueda .

Así es como puede evitar que Google indexe el contenido de AI Chatbot : ¿Le preocupa que Google lo clasifique más bajo debido a su AI chatbot?No está solo, y el defensor de la búsqueda de Google, John Mueller, publicó un anuncio de servicio público al respecto. Él comparte cómo puede impedir que Google indexe el contenido generado por su chatbot de IA: (1) use un iframe robotizado, (2) use un archivo o recurso JavaScript robotizado o (3) use un data-nosnippet. Alguien señaló que Googlebot, el rastreador web de Google, no debe obtener estos datos. Mueller respondió que "algunos sitios crean páginas de formas extrañas... Como se puede imaginar, los resultados pueden ser un poco... incómodos para todos".Para obtener más información sobre esta historia, lea este artículo de Search Engine Journal .

No debe eliminar el contenido anterior: Google : El mundo del SEO está alborotado con la reciente revelación de Gizmodo de la poda masiva de contenido de CNET para mejorar sus clasificaciones de búsqueda.Según Gizmodo,"la empresa eliminó pequeños lotes de artículos antes de la segunda quincena de julio, pero luego el ritmo aumentó".En un memorando interno , CNET afirma que esta es una iniciativa estratégica periódica para mejorar su autoridad de dominio. El enlace de búsqueda de Google también tuiteó sobre esto :“¿Estás eliminando contenido de tu sitio porque de alguna manera crees que a Google no le gusta el contenido “antiguo”?¡Eso no es nada! Básicamente, no deberías eliminar el contenido antiguo solo por su antigüedad. En su lugar, debe mirar la calidad del contenido. ¿Sigue siendo útil? ¿Sigue proporcionando valor a sus lectores? Claro, es posible que algunos contenidos antiguos ya no sean beneficiosos, pero algunos sí lo son. Por lo tanto, los algoritmos de clasificación de Google no considerarán la antigüedad de su contenido como un indicador de su valor. Por lo tanto, es mejor evaluar su contenido para ver si sigue siendo relevante y cumple con las pautas de la EEAT de Google y otras prácticas recomendadas. Lea este artículo de Search Engine Land para obtener más información.

Ahora puede medir la autoridad de la marca con Moz : ¿alguna vez ha tenido curiosidad acerca de qué tan fuerte es su marca en el espacio en línea?Moz te ayuda a echar un vistazo a su nueva métrica llamada Autoridad de marca. Lanzado para pruebas beta el 7 de agosto de 2023, Brand Authority “puede ayudarlo a expandir su visión más allá del SEO”, lo que significa que ahora puede cuantificar cómo sus otras campañas, como las relaciones públicas, impactan su marca más que solo en las clasificaciones de búsqueda. Según el Dr. Pete Meyers, científico de marketing de Moz,"Con Brand Authority, finalmente podemos entender cuánto importan y poner ese poder a trabajar".¿Será esta una métrica útil para los propietarios de sitios web? Esperaremos y veremos. Lea la historia completa de Search Engine Land .

Nota del editor: "Noticias de SEO que puede usar" es una publicación de blog semanal publicada todos los lunes por la mañana solo enSEOblog.com, que reúne las principales noticias de SEO de todo el mundo.Nuestro objetivo es hacer deSEOblog.comuna ventanilla única para todos los que buscan noticias de SEO, educación y para contratar a un experto en SEO con nuestro completodirectorio de agencias de SEO.