Noções básicas de SEO técnico: rastreamento, indexação e classificação

Publicados: 2021-05-11

Esta postagem foi publicada originalmente em maio de 2021. Última atualização: 6 de fevereiro de 2022.

Hoje, falaremos sobre os fundamentos do SEO técnico. Explicaremos a diferença entre rastreamento, indexação e classificação. Além disso, mostraremos como aproveitar os links internos, o arquivo robots.txt e o mapa do site XML para ajudar o Google a rastrear e indexar sua loja da Shopify com mais rapidez e eficiência.

Visão geral

  • Como o Google funciona: qual é a diferença entre rastreamento, indexação e classificação
  • Como criar uma estrutura de links internos robusta
  • Shopify e robots.txt: tudo o que você precisa saber
  • Shopify & sitemap.xml: tudo o que você precisa saber
  • Como enviar seu mapa do site para o Google Search Console: por que é importante e como fazer isso [Bônus]
  • Conclusão

Como o Google funciona: qual é a diferença entre rastreamento, indexação e classificação

O Google segue três etapas para gerar as SERPs (páginas de resultados do mecanismo de pesquisa):

  • Rastejando
  • Indexação
  • Classificação

O rastreamento é o processo automatizado durante o qual o Googlebot descobre novos dados na web, ou seja, novas páginas ou páginas antigas atualizadas.

Como isso acontece? O Googlebot usa dois recursos para rastrear a web:

  • Uma lista de URLs de rastreamentos anteriores, ou seja, páginas que o Googlebot já rastreou
  • Mapas de site

Em seguida, o Google rastreia todos os URLs da lista e todos os URLs incluídos nos mapas do site. Observação: durante o processo de rastreamento, o Google presta atenção extra a novos sites, atualizações de páginas da Web antigas e links inativos.

O Googlebot pode descobrir uma nova página:

  • Seguir um link em uma página que já foi rastreada. Por exemplo, se você criar uma nova página de produto e adicionar um link a ela em sua página inicial, na próxima vez que o Googlebot rastrear sua página inicial (uma página que ele já conhece), ele também rastreará sua nova página de produto.
  • Ler um mapa do site que foi atualizado e contém um link para a página da Web recém-criada.

Importante

Para rastrear seu site, o Google deve poder acessar suas páginas da web. Isso significa que sua loja da Shopify não deve ser protegida por senha (porque o Googlebot acessa a web como um usuário anônimo).

Você pode fazer várias coisas para ajudar o Google a rastrear (ou seja, descobrir) suas novas páginas da web mais rapidamente. Por exemplo:

  • Crie uma estrutura de links internos forte
  • Crie um arquivo robots.txt
  • Crie um arquivo sitemap.xml e envie-o para o Google Search Console

Discutiremos cada uma dessas etapas com mais detalhes a seguir.

O Google usa algoritmos para determinar quais sites rastrear, com que frequência e quantas páginas rastrear de cada site. Se você adicionou uma nova página da web ou fez alterações em uma existente, você pode solicitar um novo rastreamento - você pode enviar URLs individuais ou uma versão atualizada do seu mapa do site para o Google Search Console. Saiba mais → Peça ao Google para rastrear novamente seus URLs

Lembre-se de que o novo rastreamento pode levar várias semanas - você pode usar o Relatório de cobertura do índice para monitorar o progresso. Observe que não faz sentido solicitar um novo rastreamento várias vezes - isso não acelerará o processo.

Resumindo, o rastreamento é o processo de descoberta de novos dados na web. A indexação é o processo de categorizar, organizar e armazenar esses dados no Google Index.

O que isto significa? Depois que o Googlebot descobre uma nova página, ele tenta avaliar seu conteúdo e entender do que se trata. Em seguida, ele organiza e armazena essas informações em um enorme banco de dados - o Google Index. O Índice do Google contém centenas de bilhões de páginas. São mais de 100 milhões de gigabytes. O Google o descreve como o índice na parte de trás de um livro - "com uma entrada para cada palavra vista em cada página da Web que indexamos. Quando indexamos uma página da Web, a adicionamos às entradas de todas as palavras que ela contém". (Fonte: Google, Como funcionam os algoritmos de pesquisa)

Resumindo, quando uma página é indexada, ela pode aparecer em SERPs. Dica profissional: use o Relatório de cobertura do índice para verificar quais páginas da sua loja da Shopify foram indexadas e detectar quaisquer problemas de indexação.

Se você acha que uma página do seu site que foi indexada anteriormente não está mais aparecendo nas SERPs, use a ferramenta de inspeção de URL para verificar seu status. Se não estiver mais indexado, verifique se há problemas de indexação (por exemplo, erros 4xx ou erros 5xx). Se houver algum problema de indexação, corrija-o e solicite um novo rastreamento.

“Então, indexação e classificação não são a mesma coisa?”, você pode perguntar.

A resposta é não." Eis o porquê: quando indexa uma página, o Google apenas a adiciona aos SERPs - ela pode aparecer na página 1, página 101, página 1001 etc. Em termos de classificação, seu objetivo final é chegar ao primeiro lugar no ranking #1 página dos SERPs.

Então, o que exatamente é classificação?

O objetivo principal do Google é retornar os resultados mais relevantes e de alta qualidade para cada consulta de pesquisa. Para conseguir isso, o Google precisa analisar todas as informações do Índice do Google e determinar quais resultados seriam os mais adequados para a consulta de pesquisa. Isso acontece toda vez que alguém usa a Pesquisa do Google - o processo é chamado de classificação.

Para encontrar os resultados mais relevantes, os algoritmos de classificação do Google levam em consideração muitos fatores. Alguns estão relacionados ao usuário e sua consulta:

  • Localização do usuário
  • Histórico do navegador
  • Configurações do navegador
  • Palavras-chave
  • Intenção de pesquisa

Outros estão relacionados ao seu site:

  • Perícia
  • Relevância do conteúdo
  • Qualidade do conteúdo
  • Atualização do conteúdo
  • Número de backlinks
  • Autoridade de domínio (DA)
  • Autoridade de página da Web (PA)
  • Usabilidade
  • E mais

Em suma, a classificação é o processo de ordenar os resultados nas SERPs do mais relevante (exibido no primeiro lugar) para o menos relevante. Para se tornar melhor na recuperação dos melhores resultados para cada consulta (ou seja, na classificação), o Google faz pequenos ajustes de algoritmo todos os dias. Eles também têm amplas atualizações de algoritmos principais, que impactam muito os SERPs e afetam muitos setores.

Em última análise, quanto maior a classificação de uma página para uma consulta de pesquisa:

  • Quanto mais relevante a página for para a consulta de pesquisa
  • Quanto maior a qualidade (especialmente em comparação com outros resultados nas SERPs)

  • O rastreamento é o processo de varredura na web em busca de novos dados (novas páginas da web e páginas atualizadas)
  • Indexação é o processo de organizar e armazenar esses dados no Google Index
  • Ranking é o processo de determinar a posição de cada página da web nos SERPs para cada consulta de pesquisa

Até agora, não mencionamos SEO técnico. Então, naturalmente, você pode se perguntar: “O que o SEO técnico tem a ver com rastreamento, indexação e classificação?”

A resposta é “tudo!” Para que o Google rastreie, indexe e classifique sua loja da Shopify, ela deve ser tecnicamente otimizada.

Aqui está o que você precisa saber sobre rastreamento em termos de SEO técnico:

  • O Googlebot deve conseguir alcançar e rastrear seu site. Lembre-se de que o Googlebot acessa a web como usuário anônimo. Assim, sua loja Shopify não deve ser protegida por senha. Saiba como remover a senha da sua loja da Shopify
  • Você deve ter um sitemap XML - um arquivo que ajuda o Google a indexar suas novas páginas da web com mais rapidez e eficiência. Também ajuda o Google a avaliar a importância de suas páginas da web e entender a relação entre as diferentes páginas e recursos.
  • Você deve ter um arquivo robots.txt - um arquivo de texto simples que informa ao Google quais páginas da sua loja da Shopify ele pode acessar (ou seja, índice) e quais não pode.
  • Você deve ter uma estratégia de links internos à prova de balas - links internos ajudam o Google a navegar em seu site e descobrir novas páginas muito mais rapidamente.
  • Sua loja da Shopify deve ter uma hierarquia de páginas de baixa profundidade, ou seja, todas as páginas importantes do seu site não devem estar a mais de três cliques de distância da sua página inicial. Isso otimizará seu orçamento de rastreamento (o número de páginas que o Google rastreia em seu site em um único rastreamento), ou seja, seu orçamento de rastreamento será alocado para suas páginas mais importantes.
  • Seu site deve ter uma estrutura de URL lógica que o Google possa entender e seguir facilmente.
  • Sua loja Shopify deve ter navegação intuitiva.

Aqui está o que você precisa saber sobre indexação em termos de SEO técnico:

  • Você deve adicionar marcação de dados estruturados às suas páginas. Lembre-se de que ao indexar uma página, o Google tenta entendê-la - a marcação de dados estruturados facilita esse processo. Na Shopify, você precisa adicionar dados estruturados à sua página inicial, páginas de coleção, páginas de produtos, páginas de blog e páginas de artigos. Saiba mais sobre marcação de dados estruturados → Dados estruturados para Shopify: o guia definitivo [2022]

Tenha em mente que, em termos de indexação, as coisas são um pouco mais orientadas para o SEO na página. Por exemplo, outras coisas que você pode fazer para ajudar o Google a indexar sua loja da Shopify incluem otimizar os títulos e cabeçalhos de suas páginas, criar meta tags descritivas, otimizar seu conteúdo visual, usar texto para transmitir sua mensagem e muito mais.

E quando se trata de classificação, as coisas ficam ainda mais complexas. O Google leva em consideração a saúde técnica do seu site, bem como sua saúde geral de SEO (por exemplo, se é compatível com dispositivos móveis, se contém conteúdo novo e relevante, se você segue as Diretrizes para webmasters do Google etc.). Os fatores técnicos de SEO que mais importam para a classificação incluem velocidade da página, conteúdo duplicado e links quebrados.

Nos próximos meses, discutiremos cada um desses tópicos técnicos de SEO. Hoje, vamos nos concentrar apenas nas primeiras etapas que você precisa seguir para ajudar o Google a rastrear sua loja da Shopify:

  • Crie uma estratégia robusta de links internos
  • Tenha um arquivo robots.txt impecável
  • Tenha um sitemap XML impecável

Como criar uma estrutura de links internos robusta

Um link interno é um link em uma página da Web que leva a outra página ou a um recurso no mesmo domínio.

Os links internos são um componente essencial da arquitetura da sua loja da Shopify e ajudam o Google a entender melhor a estrutura do seu site. Como resultado, uma forte estrutura de links internos ajuda o Google a rastrear e indexar suas páginas da web com mais rapidez e eficiência.

Para construir uma estrutura robusta de links internos, você deve primeiro entender a diferença entre os dois tipos de links internos:

  • Links internos de navegação - links que compõem a navegação da sua loja da Shopify (por exemplo, links em seu menu principal, menus da barra lateral, menus de cabeçalho e rodapé, etc.). Eles estabelecem a hierarquia de suas páginas da web e ajudam seus clientes e o Google a navegar em sua loja. Além disso, eles passam o link equity que ajuda o Google a entender quais são as páginas mais importantes da sua loja. Como resultado, o Google pode rastrear essas páginas com mais frequência.
  • Links internos contextuais - links no conteúdo principal de uma página da web (por exemplo, links para páginas de produtos em uma página de categoria, links em artigos e descrições de produtos, links em páginas de políticas, etc.). O objetivo desses links é passar o valor do link e ajudar o Google a descobrir novas páginas mais rapidamente.

Criando uma estrutura de links internos à prova de balas em 10 etapas

Etapa 1: verifique se seus links internos podem ser rastreados.

Em outras palavras:

  • Os URLs devem ser formatados corretamente. Shopify cuida disso por padrão. Ainda assim, você pode usar a Ferramenta de inspeção de URL para verificar se há problemas.

Como regra geral, lembre-se de que quanto menor for um URL, melhor - portanto, evite caracteres, símbolos, números e palavras de preenchimento desnecessários (por exemplo, "e", "a", "o" etc.) .

Por padrão, Shopify exclui símbolos (por exemplo, “&”, “?,” “!”) dos URLs. No entanto, não exclui palavras de preenchimento (por exemplo, "e", "o", "um", etc.) Portanto, isso é algo que você deve prestar atenção.

  • Não crie links internos para páginas bloqueadas pelo arquivo robots.txt (a menos que seja necessário).
  • Não crie links internos para páginas que tenham a metatag “sem índice” (a menos que seja necessário).

Observação: discutiremos o arquivo robots.txt e a metatag "sem índice" com mais detalhes abaixo.

Etapa 2: verifique se não há links internos quebrados em seu site.

Você pode usar uma ferramenta de auditoria de site como a Auditoria de Site da SEMRush para visualizar um relatório de links internos e identificar links internos quebrados. Existem duas maneiras de corrigir links internos quebrados - você pode removê-los ou substituí-los por outro link interno relevante (e funcionando!).

Dica profissional para evitar links internos quebrados

Se você decidir alterar o URL de uma página, certifique-se de que a caixa de seleção “Criar um redirecionamento de URL para link antigo → novo link ” esteja marcada. Na Shopify, está marcado por padrão. Ainda assim, é uma boa prática verificar novamente.

Etapa 3: remova todas as páginas órfãs da sua loja da Shopify.

Páginas órfãs são páginas que não estão vinculadas a nenhuma outra página da sua loja da Shopify. Como o Googlebot usa links para rastrear a web, é mais difícil descobrir páginas órfãs (limite impossível se as páginas órfãs não estiverem incluídas no mapa do site). Além disso, seus clientes não podem acessar páginas órfãs. Em outras palavras, eles realmente não têm peso de SEO e não o beneficiam de forma alguma.

Portanto, é importante descobrir se o seu site contém essas páginas. Você pode usar uma ferramenta como a Auditoria do Site do Ahrefs para verificar as páginas órfãs.

Se o seu site contém páginas órfãs, você precisará avaliar a importância delas.

  • Se forem importantes, adicione links para eles em outras páginas do seu site. Dica profissional: se forem páginas de conteúdo fino, tente encontrar tópicos comuns e mescle as páginas semelhantes - é melhor ter uma página de alta qualidade do que várias páginas de baixa qualidade.
  • Se não forem importantes, basta removê-los.

Etapa 4: certifique-se de que seu site tenha uma hierarquia de páginas de baixa profundidade.

Primeiro, identifique as páginas mais importantes do seu site.

Em geral, a página mais importante de um site é sua página inicial - esta é a página com a maior autoridade de página (PA).

No e-commerce, as páginas que impactam diretamente no resultado final também são de grande importância. Estas são suas páginas de categoria e suas páginas de produtos.

Todas estas páginas devem estar devidamente interligadas. Isso acontece se o seu site tiver uma arquitetura de site tecnicamente otimizada.

A coisa mais importante a ter em mente aqui é que as páginas importantes em seu site não devem estar a mais de três cliques de distância de sua página inicial (por exemplo, página inicial > páginas de categorias > páginas de produtos). Dessa forma, sua página inicial passará mais link equity para suas páginas de categoria, e suas páginas de categoria passarão link equity para suas páginas de produtos, etc. Como resultado, sua categoria e páginas de produtos terão uma classificação mais alta.

Além disso, deve haver uma correlação lógica entre as páginas interligadas. Por exemplo, as páginas de produtos em uma categoria devem compartilhar características semelhantes, ou seja, não deve haver calças na categoria “Camisas”.

Nota: Discutiremos isso com mais detalhes em nosso próximo artigo, portanto, fique atento!

Etapa 5: use links internos para ajudar o Googlebot a descobrir novas páginas mais rapidamente e melhorar suas classificações.

Digamos que você acabou de adicionar uma nova página de produto à sua loja da Shopify. Para ajudar o Google a rastreá-lo e indexá-lo mais rapidamente, você pode adicionar um link para ele em sua página inicial ou em uma postagem de blog que tenha um desempenho excepcional. Como benefício adicional, isso passará o valor do link para sua nova página de produto, o que significa que terá melhores chances de classificação mais alta nas SERPs - é claro, todos sabemos o que isso significa: mais visibilidade e mais oportunidades de vendas.

Passo 6: Aproveite os produtos recomendados.

Uma seção "Produtos recomendados" aumentará o valor médio do seu pedido e ajudará você a oferecer uma experiência de compra mais envolvente. Além disso, é uma ótima oportunidade de interligação - os links em sua seção "Produtos recomendados" são links em suas páginas de produtos que levam os clientes a outras páginas de produtos em sua loja da Shopify.

Na Shopify, a seção “Produtos recomendados” exibe uma lista gerada automaticamente de recomendações de produtos.

Os produtos são recomendados com base em um algoritmo que prevê os produtos mais relevantes com base no produto com o qual o cliente está interagindo. (Fonte: Shopify, Mostrando recomendações de produtos nas páginas de produtos)

O algoritmo usa dados de vendas (para determinar quais produtos são frequentemente comprados juntos) e descrições de produtos (para determinar quais produtos são semelhantes ou se complementam). O algoritmo associa até dez produtos similares por produto e os exibe em ordem de relevância.

Existem certas limitações que você precisa estar ciente. Por exemplo, dependendo do seu plano da Shopify, você pode exibir diferentes tipos de recomendações de produtos em suas páginas de produtos. Além disso, você não pode personalizar o algoritmo para excluir produtos específicos (a menos que você escreva um código personalizado). Saiba mais → Shopify, Recomendações de produtos

Alguns temas da Shopify são compatíveis com recomendações de produtos por padrão:

Fonte: Shopify, Mostrar recomendações de produtos na página do produto

Além disso, você pode criar uma seção personalizável de “Produtos relacionados” ou usar um aplicativo da Shopify que pode ajudá-lo a exibir produtos relacionados em suas páginas de produtos. Um desses aplicativos é Produtos Relacionados - Também Comprados pela Globo:

O aplicativo ostenta uma - classificação. Ele tem um plano gratuito e uma versão paga que custa US$ 9,90/mês (uma avaliação gratuita de 7 dias está disponível).

Passo 7: Esteja atento ao texto âncora.

O texto âncora é importante porque ajuda o Google a entender sobre o que é a página interligada e se ela é relevante para a página que contém o link.

O texto âncora de seus links internos deve ser relevante, descritivo e específico. Na melhor das hipóteses, deve conter palavras-chave.

Como regra geral, evite textos âncora vagos como “Leia mais” ou “Clique aqui”. Em vez disso, faça algo assim: “Leia mais → Link-interno-com-texto-âncora-relevante-descritivo

Etapa 8: evite cadeias de redirecionamento.

Uma cadeia de redirecionamento ocorre quando há vários redirecionamentos entre o URL inicial (ou seja, o URL solicitado) e o URL de destino final. Por exemplo, imagine que X é o URL inicial e Z é o URL final. Uma cadeia de redirecionamento seria URL X > redireciona para URL Y > redireciona para URL Z. Como resultado, a URL Z leva mais tempo para carregar.

Em geral, você deve evitar cadeias de redirecionamento porque elas levam a uma experiência de usuário ruim. Além disso, eles tornam mais difícil para o Google rastrear seu site. Portanto, o Google recomenda limitá-los o máximo possível.

Como ocorrem as cadeias de redirecionamento?

Digamos que você altere o URL de uma página e crie um redirecionamento para o novo URL. Agora imagine que a página já foi interligada e o link leva ao URL antigo. Quando alguém clicar no link, será redirecionado primeiro para o URL antigo e depois para o novo atualizado.

Uma cadeia de redirecionamento também pode ocorrer quando você instala um certificado SSL em seu site - neste caso, todos os links HTTP antigos serão redirecionados automaticamente para os links HTTPS novos e seguros. Assim, quando um usuário clicar em um link que você já criou, ele será redirecionado primeiro para a versão HTTP da página e depois para a versão HTTPS.

Para minimizar as cadeias de redirecionamento:

  • Certifique-se de que todos os links internos levem diretamente a uma página ativa.
  • Atualize os redirecionamentos que você implementa durante a mudança de HTTP para HTTPS.
  • Evite vincular a um URL que esteja redirecionando para outro URL.
  • Audite regularmente seus redirecionamentos existentes e remova todos os redirecionamentos desnecessários. Você pode usar a Ferramenta de Auditoria do Site da SEMRush para detectar cadeias de redirecionamento e obter conselhos sobre como corrigi-las.

Passo 9: Não exagere.

Claro, as interligações são importantes. Mas existe “interlinks demais”, principalmente se eles não tiverem um propósito, ou seja, se não melhorarem de forma alguma a qualidade da página.

Uma página deve conter um número razoável de links internos, e todos eles devem fazer sentido, ou seja, deve haver uma razão lógica para eles estarem na página.

Em termos leigos, não crie links internos apenas por fazer.

Etapa bônus: crie uma estratégia de conteúdo.

Ter uma estratégia de conteúdo em vigor é importante por vários motivos:

  • É bom para SEO e ajuda você a classificar para uma tonelada de palavras-chave relevantes. Isso aumenta a visibilidade e pode ajudá-lo a aumentar o reconhecimento da marca.
  • Isso ajuda você a se estabelecer como uma autoridade em seu nicho.
  • Ele constrói a confiança do cliente.
  • Ele ajuda você a oferecer uma experiência de compra mais informada.
  • Ele ajuda você a apresentar seus produtos de uma maneira mais envolvente e completa.
  • Ele oferece uma tonelada de oportunidades de interligação.

Então, como você constrói uma estratégia de conteúdo forte?

Em primeiro lugar, crie conteúdo relevante e de alta qualidade. Escreva sobre tópicos com os quais seu público-alvo se preocupa - resolva seus problemas, responda suas perguntas, etc.

Em segundo lugar, crie grupos de tópicos, ou seja, crie tópicos relevantes e crie cinco ou dez posts separados para cada tópico. Uma vez que estes posts abrangerão diferentes ângulos do mesmo tema, as possibilidades de interligação serão inúmeras. Além disso, quando você publicar todos os posts de uma série, você pode criar uma página pilar e interligar todos eles - esta é uma ótima maneira de elevar sua estratégia de links internos.

Terceiro, use suas postagens de blog para interligar sua categoria e páginas de produtos (por exemplo, em guias de presentes, postagens sobre coleções de produtos ou lançamentos de produtos e muito mais). Isso ajudará o Google a encontrá-los mais rapidamente e também poderá melhorar seus rankings.

Shopify e robots.txt: tudo o que você precisa saber

Simplificando, o robots.txt é um arquivo de texto simples que informa ao Google quais páginas do seu site devem ser rastreadas e quais não devem ser rastreadas.

Em geral, ter um arquivo robots.txt não é necessário para SEO. No entanto, ter um robots.txt oferece vários benefícios que você não deve ignorar:

  • Ele impede que o Googlebot (e outros rastreadores de mecanismos de pesquisa) rastreie e indexe páginas que contenham informações confidenciais (por exemplo, páginas de login/inscrição, páginas de conta etc.).
  • Ele evita que o Googlebot rastreie e indexe páginas e recursos que não têm peso de SEO (por exemplo, páginas de “obrigado”, páginas de visualização, arquivos pdf (por exemplo, manuais de produtos), etc.).
  • Ele evita que o Googlebot rastreie páginas de conteúdo fino ou páginas que contenham conteúdo duplicado.
  • Ele ajuda os mecanismos de pesquisa a encontrar o mapa do site com mais facilidade (o arquivo robots.txt contém um link para o mapa do site).
  • Ele ajuda o Google a rastrear e indexar seu site com mais rapidez e eficiência.
  • Ele otimiza seu orçamento de rastreamento (garantindo que o Google não rastreie páginas que não deveriam ser rastreadas e indexadas).

O que você precisa saber sobre Shopify e robots.txt:

Este é o arquivo robots.txt da Final Straw - uma de nossas lojas favoritas da Shopify.

Antes de prosseguirmos, vamos explicar o que cada diretiva (ou seja, cada linha no arquivo robots.txt) significa:

  • A diretiva "User-agent" especifica para qual rastreador as instruções se destinam. Em outras palavras, se um user agent for especificado na diretiva "User-agent" (por exemplo, "User-agent: Googlebot"), esse user agent (por exemplo, "Googlebot") deverá seguir as instruções, mas um agente diferente ( por exemplo, "Bingbot" - rastreador do Bing) deve seguir em frente e procurar uma diretiva mais específica. Se um user agent não for especificado (como é o caso acima), as instruções devem ser seguidas por todos os bots de mecanismos de pesquisa (ou rastreadores).
  • A diretiva "Permitir" é aplicável apenas ao Googlebot. Ele informa ao Googlebot que ele pode acessar uma página da Web ou subpasta específica, mesmo que sua página pai ou subpasta não seja permitida.
  • A diretiva "Disallow" informa aos bots de mecanismos de pesquisa quais páginas não devem ser rastreadas e indexadas.
  • A diretiva “Sitemap” aponta os bots do mecanismo de pesquisa para a localização do seu sitemap XML.
  • A diretiva “Host” contém o URL de sua página inicial (ou seja, seu domínio principal).

Agora que você entende melhor como o robots.txt funciona, veja o que você precisa saber sobre os arquivos robots.txt e a Shopify:

  • Shopify gera automaticamente seu arquivo robots.txt.
  • Seu arquivo robots.txt está localizado no diretório raiz do nome de domínio principal do seu site. Para acessá-lo, basta adicionar “/robots.txt” na URL da sua página inicial, por exemplo, “https://www.yourshopifystore.com/robots.txt”
  • Seu arquivo robots.txt é mantido pela Shopify. Isso significa que você não pode editar seu conteúdo. No entanto, se você não quiser que o Google acesse páginas específicas que não são proibidas em seu arquivo robots.txt, você pode ocultá-las usando a metatag "noindex" - uma linha de código que informa aos mecanismos de pesquisa para não indexar um determinado página. A implementação da metatag “noindex” requer conhecimento técnico, pois você precisará personalizar seu arquivo de layout theme.liquid. Aprenda como não indexar páginas específicas → Shopify, Ocultar uma página dos mecanismos de pesquisa

Se você não entende de tecnologia e não está familiarizado com Shopify Liquid, é melhor entrar em contato com um especialista da Shopify e solicitar ajuda.

Além disso, você pode usar um aplicativo Shopify SEO como o Smart SEO - Smart SEO pode adicionar uma tag “noindex” a uma página com apenas um clique de um botão (mas mais sobre isso posteriormente).

  • Você pode monitorar quais páginas foram bloqueadas pelo seu arquivo robots.txt inscrevendo-se em uma conta gratuita do Google Search Console.

Você não deve se preocupar se perceber que sua página de checkout foi bloqueada pelo arquivo robots.txt - ela não precisa ser classificada para SEO. Além disso, ao não rastrear sua página de checkout, os bots de mecanismos de pesquisa têm mais tempo para rastrear páginas mais importantes em seu site (por exemplo, sua página inicial, páginas de categorias, páginas de produtos, páginas de blog e artigos etc.).

No entanto, se uma página que afeta diretamente seus resultados financeiros (ou seja, uma página de categoria, uma página de produto etc.) for bloqueada pelo arquivo robots.txt, você deve se preocupar. Em geral, há quase 0% de chance de que isso aconteça (já que Shopify cria e gerencia automaticamente seu arquivo robots.txt). Ainda assim, se isso acontecer, entre em contato com a equipe de suporte da Shopify imediatamente.

Shopify & sitemap.xml: tudo o que você precisa saber

Seu sitemap XML fornece ao Googlebot (e outros bots de mecanismos de pesquisa) informações sobre as páginas da web e recursos (por exemplo, arquivos de mídia, pdfs etc.) em sua loja da Shopify. Basicamente, é uma lista abrangente das páginas e recursos mais importantes do seu site. Seu mapa do site também contém informações importantes sobre suas páginas da web (por exemplo, quando foram modificadas pela última vez, quantas imagens contêm, qual é sua relação com outras páginas ou recursos, etc.).

O objetivo do mapa do site é ajudar o Google a rastrear seu site com mais rapidez e eficiência.

Semelhante aos arquivos robots.txt, ter um mapa do site não é absolutamente necessário - o Google poderá rastrear seu site sem sua ajuda (especialmente se você tiver uma forte estratégia de links internos). No entanto, ter um sitemap certamente pode beneficiá-lo. Principalmente nos seguintes casos:

  • Se você tem uma grande loja de catálogo. Imagine ter que interligar mais de 1000 (ou mesmo apenas 100) páginas de produtos… impossível, certo?
  • Se a sua loja Shopify for nova e ainda tiver muito poucos backlinks e interlinks.
  • Se a sua loja da Shopify contiver muitos arquivos de mídia, como vídeos e imagens.
  • Se você fizer upload de muitos arquivos pdf (por exemplo, manuais ou instruções de produtos).
  • Se você postar muitos artigos.
  • Além disso, ter um mapa do site significa que o Googlebot (e outros rastreadores de mecanismos de pesquisa) rastreará seu site com mais frequência.

O que você precisa saber sobre os mapas do site Shopify e XML:

Este é o mapa do site da Rebel Nell - outra de nossas lojas favoritas do Shopify. É assim que um mapa de site típico de uma loja da Shopify se parece - há um mapa de site pai que vincula a mapas de site adicionais (ou mapas de site filhos) para produtos, coleções, blogs e páginas. Essa categorização ajuda o Google a navegar e rastrear sua loja da Shopify com mais facilidade.

Cada um dos sitemaps adicionais contém uma extensa lista de páginas. Por exemplo, se olharmos mais de perto o mapa do site do produto Rebel Nell, perceberemos que ele contém links para todas as páginas do produto Rebel Nell, bem como informações sobre imagens, quando a página foi modificada pela última vez, com que frequência a página é modificado e muito mais.

Veja o que você precisa saber sobre arquivos sitemap.xml e Shopify:

  • Shopify gera automaticamente um arquivo sitemap.xml para sua loja. Ele contém links para todos os seus produtos, imagens de produtos, páginas, coleções e postagens de blog.

Se você estiver no plano Basic Shopify, apenas o domínio principal da sua loja terá um arquivo de mapa do site gerado e poderá ser descoberto pelos mecanismos de pesquisa. Se você estiver no plano Shopify, Advanced Shopify ou Shopify Plus, poderá usar o recurso de domínios internacionais para criar domínios específicos de região ou país. Quando você usa domínios internacionais, os arquivos de mapa do site são gerados para todos os seus domínios. Todos os seus domínios podem ser descobertos pelos mecanismos de pesquisa, a menos que eles redirecionem para seu domínio principal. (Fonte: Shopify, Encontrando e enviando seu mapa do site)

  • Seu mapa do site está localizado no diretório raiz do domínio da sua loja da Shopify, ou seja, você pode encontrá-lo adicionando “/sitemap.xml” ao URL da sua página inicial (por exemplo, “https://www.yourshopifystore.com/sitemap. xml”). Observação: você também pode encontrar a localização do seu sitemap no arquivo robots.txt - lembre-se de que está especificado na diretiva "Sitemap".
  • Shopify atualiza automaticamente seu sitemap toda vez que você atualiza sua loja (por exemplo, toda vez que você adiciona um novo produto ou publica uma nova postagem no blog).
  • Você não pode editar seu sitemap manualmente. Se você deseja excluir uma determinada página do mapa do site da sua loja, só pode fazê-lo através da API da Shopify (através de código). Felizmente, existem alguns aplicativos que podem ajudá-lo se você não for experiente em tecnologia. Um desses aplicativos é o Smart SEO. Com apenas um clique no botão, você pode excluir as páginas que não deseja que apareçam no seu sitemap. Isso também adicionará uma tag noindex a eles e os excluirá da página de pesquisa do site.

Observe as caixas de seleção ao lado de cada produto - se uma caixa de seleção estiver marcada, o status do produto será definido como "Ativo". Isso significa que o produto está incluído no mapa do site. Se você deseja excluir um produto do seu mapa do site, tudo o que você precisa fazer é remover a marca de seleção da caixa de seleção.

Smart SEO ostenta uma classificação estelar. Tem um plano gratuito e três planos pagos. O preço começa em $ 9,99/mês (uma avaliação gratuita de 7 dias está disponível).

Agora que você sabe o que é um arquivo sitemap.xml e como ele pode beneficiá-lo, vamos para a última seção deste guia - enviar seu mapa do site para o Google Search Console.

Como enviar seu mapa do site para o Google Search Console: por que é importante e como fazer?

Você pode enviar seu arquivo sitemap.xml para o Google Search Console a qualquer momento. Isso não é absolutamente necessário - o Google poderá encontrar seu mapa do site mesmo que você não o envie. Mas é importante que você faça isso!

Por quê? Porque enviar seu mapa do site para o Google Search Console ajudará o Googlebot a rastrear e indexar suas páginas e recursos da web com muito mais rapidez. Além disso, enviar seu mapa do site para o Google Search Console melhorará seus rankings, elevará seus esforços de links internos e, finalmente, expandirá seu alcance. Simplificando, enviar seu mapa do site lhe dará mais exposição e levará a mais oportunidades de vendas.

Como enviar seu mapa do site para o Google Search Console:

  • Certifique-se de que seu site não esteja protegido por senha - o Google não poderá acessar seu mapa do site se estiver. Saiba como remover a senha da sua loja da Shopify
  • Crie uma conta gratuita do Google Search Console.
  • Verifique seu domínio com o Google Search Console e confirme que você é o proprietário da sua loja da Shopify. Observação: você não poderá verificar seu domínio se seu site estiver protegido por senha.
  • Envie seu arquivo sitemap.xml para o Google Search Console. Siga as etapas listadas aqui → Shopify, Localizando e enviando seu mapa do site

Com o Smart SEO, você pode enviar facilmente seu mapa do site para o Google sem passar pelo processo manual de usar o Search Console. Observe que você ainda precisará de uma conta do Google Search Console com uma propriedade de site verificada.

Conclusão

Hoje, falamos sobre como a pesquisa funciona. Explicamos a diferença entre rastreamento, indexação e classificação, bem como o que o SEO técnico tem a ver com cada um desses processos.

Além disso, mostramos como ajudar o Google a rastrear e indexar sua loja da Shopify com mais rapidez e eficiência:

  • Criando uma estratégia robusta de links internos
  • Ter um arquivo robots.txt impecável
  • Ter um arquivo sitemap.xml impecável e enviá-lo ao Google Search Console

Se você tiver mais dúvidas, basta nos enviar uma linha abaixo!

In our next article, we'll focus on website architecture. More specifically, we'll show you how to create a low-depth page hierarchy, a logical URL structure, and intuitive website navigation - these are key steps to building a technically optimized website (and, as you already know, it helps with crawling and indexing as well). So, stay tuned!