Deixe um pedido
GoogleBot é um nome comum para dois tipos de robôs da web usados na pesquisa do Google:
Você pode determinar o subtipo do Googlebot olhando para o cabeçalho HTTP do USR-Agent. No entanto, ambos os tipos de robôs estão subordinados ao mesmo token de produto (token agente do usuário) no robots.txt, para que você não possa escolher um deles (GoogleBot Smartphone ou GoogleBot Desktop) usando robots.txt.
Para a maioria dos sites, pesquise no Google, antes de tudo, indexa a versão móvel do conteúdo. Portanto, a maioria das solicitações do Googlebot será feita usando um robô móvel e a minoria - usando um robô de desktop.
Para a maioria dos sites do Googlebot, seu site não deve visitar seu site mais de uma vez a cada poucos segundos, em média. No entanto, devido a atrasos, pode -se esperar que esse indicador seja um pouco maior em intervalos de tempo curtos. Se o seu site não tiver tempo para lidar com as solicitações do Googlebot, você poderá reduzir a velocidade do desvio.
O Googlebot pode digitalizar os primeiros 15 mb -arquivos ou arquivo de texto suportado. Cada recurso que se refere, como CSS ou JavaScript, é carregado separadamente e cada solicitação é limitada pelo mesmo limite no tamanho do arquivo. Após os primeiros 15 MB, o arquivo para a digitalização e apenas esses 15 MB do arquivo são transmitidos para indexação. O limite no tamanho é aplicado a dados incompressivos. Outros robôs do Google, como o GoogleBot Video e o GoogleBot Image, podem ter outras restrições.
Ao viajar dos endereços IP nos EUA, o fuso horário do Googlebot é um horário do Pacífico.
Outras características técnicas do Googlebot são descritas na revisão do Google Robot.
O Googlebot encontra novos URLs para um desvio principalmente por meio de links incorporados nas páginas já visitadas. É quase impossível ocultar o site sem publicar links para ele. Por exemplo, assim que alguém atravessa o link do seu site "secreto" para outro site, o URL do seu site "secreto" pode aparecer na tag referent e será preservado e publicado por outro site em seus logs.
Se você deseja impedir o desvio do Googlebot no seu site, você tem várias opções. Lembre -se de que há uma diferença entre o desvio e a indexação: o bloqueio do Googlebot de circular pela página não impedirá que o URL desta página apareça nos resultados da pesquisa:
O bloqueio do Googlebot afeta a pesquisa do Google (incluindo Discover e todas as funções de pesquisa do Google), bem como outros produtos como o Google Images, o Google Video e o Google News.
Antes de decidir bloquear o Googlebot, é importante entender que o Head HTTP do USR-Agent usado pelo Googlebot é frequentemente falsificado por outros robôs. Portanto, é importante verificar se a solicitação realmente vem do Google. A melhor maneira de confirmar que a solicitação vem do Googlebot é executar uma postagem DNS reversa no endereço IP inicial da solicitação ou monitorar o endereço IP com os endereços IP do Googlebot.
Se você tiver dúvidas sobre SEO ou precisar de uma consulta, entre em contato com nosso companheiro de SEO por e -mail info@seo.computer ou whatsapp: +79202044461.
ID 59
