Berita SEO yang Dapat Anda Gunakan: Memperkenalkan GPTBot, Perayap Web OpenAI

Diterbitkan: 2023-08-14

Jika ada satu hal yang diinginkan sebagian besar pengguna ChatGPT, itu adalah kecerdasan buatan atau konten AI yang terkini dan lebih akurat. Nah, OpenAI telah bekerja keras untuk mewujudkannya. Baru-baru ini, raksasa teknologi itu merilis dokumentasi tentang perayap webnya sendiri.

Disebut GPTBot, OpenAI berencana untuk menggunakan perayap ini untuk membantu"model AI menjadi lebih akurat dan meningkatkan kemampuan dan keamanan umum mereka."

Ini di tengah kekhawatiran atas privasi pribadi, melewati konten berbayar dan pembuatan teks berbahaya. Untuk mengatasi masalah ini, OpenAI memastikan bahwa GPTBot difilter untuk menghindari perayapan jenis konten ini. (Meskipun mereka belum membocorkan cara kerjanya.)

GPTBot dapat mengakses konten situs web Anda dengan agen pengguna ini dan string pada file robots.txt Anda:

Token agen pengguna : GPTBot

String agen pengguna lengkap : Mozilla/5.0 AppleWebKit/537.36 (KHTML, seperti Gecko; kompatibel; GPTBot/1.0; +https://openai.com/gptbot)

Namun, jika Anda tidak ingin GPTBot mendapatkan konten Anda, Anda juga dapat memasukkan perintah ini di file robots.txt Anda:

Agen pengguna: GPTBot

Larang: /

Anda juga dapat menyesuaikan cara GPTBot dapat mengakses situs web Anda. Inilah cara Anda melakukannya:

Agen pengguna: GPTBot

Izinkan: /direktori-1/

Larang: /direktori-2/

Menggunakan perintah ini akan membuat GPTBot hanya mengakses bagian tertentu dari situs web Anda.

Semua panggilan ke situs web akan dilakukan dari alamat IP OpenAI yang tercantum dalam dokumentasi terpisahnya . Kami yakin alamat IP ini akan bertambah jumlahnya karena GPTBot merayapi lebih banyak situs web di Internet. Jika Anda tertarik, berikut adalah alamat IP yang tercantum saat penulisan:

  • 20.15.240.64/28
  • 20.15.240.80/28
  • 20.15.240.96/28
  • 20.15.240.176/28
  • 20.15.241.0/28
  • 20.15.242.128/28
  • 20.15.242.144/28
  • 20.15.242.192/28
  • 40.83.2.64/28

Jadi, apa keuntungan mengizinkan akses ke GPTBot? Selain model AI yang lebih baik dan lebih aman – GPT-5 sudah dalam pengerjaan – benar-benar tidak ada manfaatnya membiarkan konten Anda menjadi tempat pelatihan OpenAI. Tapi ini seharusnya menjadi kabar baik jika Anda memanfaatkan konten AI dan menginginkannya lebih akurat dan kuat.

Dengan langkah Google baru-baru ini untuk menggunakan data yang dapat diakses publik untuk pelatihan AI, OpenAI tidak akan tinggal diam dan melihat keunggulan kompetitifnya digerogoti.

Tentu saja, tidak ada jaminan bahwa perusahaan teknologi ini akan lolos dari pengawasan etika dan penggunaan konten online yang bertanggung jawab. Tapi kami senang melihat seberapa jauh AI akan melangkah dan bagaimana optimasi mesin pencari (SEO) akan mendapat manfaat dari kemajuan ini.

Baca dokumentasi GPTBot lengkap di sini.

Lebih Banyak Berita SEO yang Dapat Anda Gunakan

Google Mengumumkan Kerangka Pemeringkatan Baru, Lebih Mudah, dan Lebih Nyaman : Jika Anda bosan dengan pembaruan algoritme yang konstan dan kompleks , itu tidak akan segera berhenti.Namun kali ini, Google menjanjikan pembaruan peringkat pencarian yang lebih baik tanpa merombak algoritme secara signifikan. Peneliti Google baru-baru ini merilis makalah yang merinci kerangka pembobotan baru yang disebut TW-BERT. Framework ini mempermudah pencarian dokumen yang relevan dengan kueri dan perluasan kueri. Berdasarkan temuan mereka, TW-BERT menggabungkan efisiensi metode pengambilan berbasis statistik dengan model pembelajaran mendalam yang lebih berorientasi konteks. Terobosan ini memungkinkan Google menghadirkan hasil yang lebih relevan dengan kueri penelusuran. Selain itu, framework ini mudah diterapkan, artinya Google dapat memasukkannya ke dalam sistemnya tanpa kesulitan. Bagaimana ini memengaruhi peringkat pencarian masih harus dilihat. Faktanya, kami belum tahu apakah Google berencana untuk menggunakannya di masa mendatang. Berikut cerita selengkapnya dari Search Engine Journal . Untuk seluruh makalah penelitian, klik di sini .

Hewan Peliharaan Diperbolehkan?Jawab Pertanyaan Itu Dengan Atribut GBP Baru Ini : Pengguna Twitter Claudia Tomina membagikan fitur baru yang rapi di dalam Google Profil Bisnis. Disebut “Peliharaan”, atribut ini memungkinkan Anda menampilkan kebijakan hewan peliharaan. Tangkapan layar Tomina menunjukkan bahwa Anda hanya dapat menunjukkan apakah anjing diperbolehkan masuk dan keluar dari tempat Anda. Jika Anda memiliki kebijakan terpisah untuk kucing, ayam, dan teman non-manusia lainnya, Anda harus berhati-hati dengan pembaruan GBP lainnya. Tomina juga membagikan bagaimana kebijakan hewan peliharaan Anda akan ditampilkan setelah Anda membagikan informasi tersebut. Kami telah membahas beberapa pembaruan GBP yang bermanfaat selama beberapa minggu terakhir. ( Di sini , di sini dan di sini ) Kami berspekulasi ini ada hubungannya dengan membantu orang membedakan bisnis nyata dari yang palsu. Baca selengkapnya dari Meja Bundar Mesin Pencari .

Inilah Cara Memblokir Google Dari Mengindeks Konten Chatbot AI : Apakah Anda khawatir Google akan memberi peringkat Anda lebih rendah karena AI chatbot Anda?Anda tidak sendirian, dan Advokat Penelusuran Google John Mueller memposting PSA tentang hal itu. Dia membagikan bagaimana Anda dapat memblokir Google dari pengindeksan konten yang dihasilkan oleh AI chatbot Anda: (1) Gunakan iframe robot, (2) gunakan file atau sumber daya JavaScript yang dirobot, atau (3) gunakan data-nosnippet. Seseorang menunjukkan bahwa Googlebot, perayap web Google, tidak seharusnya mendapatkan data ini. Mueller menjawab bahwa “Beberapa situs membuat halaman dengan cara yang aneh… Seperti yang dapat Anda bayangkan, hasilnya bisa sedikit… canggung untuk semua orang.”Untuk lebih banyak cerita ini, baca artikel ini dari Search Engine Journal .

Anda Tidak Harus Menghapus Konten Lama – Google : Dunia SEO sedang berdengung dengan pengungkapan Gizmodo baru-baru ini tentang pemangkasan konten besar-besaran CNET untuk meningkatkan peringkat pencariannya.Menurut Gizmodo,"perusahaan menghapus sejumlah kecil artikel sebelum paruh kedua Juli, tetapi kemudian kecepatannya meningkat."Dalam memo internal , CNET mengklaim ini adalah inisiatif strategis berkala untuk meningkatkan otoritas domainnya. Google Search Liaison juga men-tweet tentang ini :“Apakah Anda menghapus konten dari situs Anda karena entah bagaimana Anda yakin Google tidak menyukai konten “lama”?Itu bukan apa-apa!” Pada dasarnya, Anda tidak boleh menghapus konten lama hanya karena usianya. Sebaliknya, Anda harus melihat kualitas konten. Apakah masih membantu? Apakah itu masih memberikan nilai bagi pembaca Anda? Tentu, beberapa konten lama mungkin tidak lagi bermanfaat, tetapi ada juga yang bermanfaat. Oleh karena itu, algoritme peringkat Google tidak akan melihat usia konten Anda sebagai indikator nilainya. Jadi, sebaiknya nilai konten Anda untuk melihat apakah konten tersebut masih relevan dan mematuhi pedoman EEAT Google dan praktik terbaik lainnya. Baca artikel Search Engine Land ini untuk informasi lebih lanjut.

Anda Sekarang Dapat Mengukur Otoritas Merek Dengan Moz : Pernahkah Anda penasaran seberapa kuat merek Anda di ruang online?Moz membantu Anda mengintip metrik baru mereka yang disebut Brand Authority. Diluncurkan untuk pengujian beta 7 Agustus 2023 lalu, Otoritas Merek “dapat membantu Anda memperluas visi Anda di luar SEO”, yang berarti Anda sekarang dapat mengukur bagaimana kampanye Anda yang lain, seperti PR, memengaruhi merek Anda lebih dari sekadar peringkat pencarian. Menurut Dr. Pete Meyers, Ilmuwan Pemasaran di Moz,“Dengan Otoritas Merek, kami akhirnya dapat memahami betapa pentingnya mereka dan menerapkan kekuatan itu.”Apakah ini akan menjadi metrik yang berguna bagi pemilik web? Kami akan menunggu dan melihat. Baca cerita selengkapnya dari Search Engine Land .

Catatan Editor: "Berita SEO yang Dapat Anda Gunakan" adalah posting blog mingguan yang diposting setiap Senin pagi hanya diSEOblog.com, mengumpulkan semua berita SEO teratas dari seluruh dunia.Tujuan kami adalah menjadikanSEOblog.comsebagai toko serba ada untuk semua orang yang mencari berita SEO, pendidikan, dan untuk mempekerjakan pakar SEO dengandirektori agensi SEOkomprehensif kami .