Laat een verzoek achter
GoogleBot is een veel voorkomende naam voor twee soorten webrobots die worden gebruikt in Google Search:
U kunt het GoogleBot-subtype bepalen door te kijken naar de HTTP-kop van de USR-Agent. Beide soorten robots zijn echter ondergeschikt aan hetzelfde producttoken (user-agent token) in robots.txt, dus u kunt er geen een van deze (GoogleBot-smartphone of GoogleBot-desktop) kiezen met Robots.txt.
Voor de meeste sites zoekt Google eerst alle indexeert de mobiele versie van inhoud. Daarom zullen de meeste verzoeken van GoogleBot worden gedaan met behulp van een mobiele robot en de minderheid - met behulp van een desktop robot.
Voor de meeste GoogleBot -sites moet uw site uw site niet meer dan eens om de paar seconden bezoeken. Vanwege vertragingen kan echter worden verwacht dat deze indicator in korte tijdsintervallen iets hoger zal zijn. Als uw site geen tijd heeft om het om te gaan met GoogleBot -aanvragen, kunt u de snelheid van IT -bypass verlagen.
GoogleBot kan het eerste 15 MB -files of ondersteunde tekstbestand scannen. Elke bron die verwijst, zoals CSS of JavaScript, wordt afzonderlijk geladen en elk verzoek wordt beperkt door dezelfde limiet in grootte van het bestand. Na de eerste 15 MB stopt het bestand met scannen en worden alleen deze 15 MB van het bestand verzonden voor indexering. De grootte in grootte wordt toegepast op niet -samendrukken. Andere Google -robots, zoals GoogleBot -video en GoogleBot -afbeelding, kunnen andere beperkingen hebben.
Bij het reizen van de IP -adressen in de VS is de GoogleBot -tijdzone een tijdstip van de Stille Oceaan.
Andere technische kenmerken van GoogleBot worden beschreven in de Google Robot Review.
GoogleBot vindt nieuwe URL's voor een omweg voornamelijk via links ingebouwd in de reeds bezochte pagina's. Het is bijna onmogelijk om de site te verbergen zonder er links naar te publiceren. Zodra iemand bijvoorbeeld de link van uw "geheime" site naar een andere site overschrijdt, kan de URL van uw "geheime" site in de referentietag verschijnen en wordt bewaard en gepubliceerd door een andere site in de logboeken.
Als u GoogleBot -bypass op uw site wilt voorkomen, hebt u verschillende opties. Vergeet niet dat er een verschil is tussen de bypass en indexatie: GoogleBot -blokkering om rond de pagina te gaan, zal de URL van deze pagina niet voorkomen in zoekresultaten:
GoogleBot -blokkering heeft invloed op Google Search (inclusief Discover en alle Google -zoekfuncties), evenals andere producten zoals Google Images, Google Video en Google News.
Voordat u besluit om GoogleBot te blokkeren, is het belangrijk om te begrijpen dat de USR-Agent HTTP-hoofd die door GoogleBot wordt gebruikt, vaak wordt vervalst door andere robots. Daarom is het belangrijk om te controleren of het verzoek echt van Google komt. De beste manier om te bevestigen dat het verzoek afkomstig is van GoogleBot is door een omgekeerde DNS -bericht uit te voeren op het eerste IP -adres van het verzoek of om het IP -adres te controleren met de GoogleBot IP -adressen.
Als u vragen heeft over SEO of u een consult nodig hebt, kunt u via e -mail contact opnemen met onze SEO -metgezel info@seo.computer of whatsapp: +79202044461.
ID 59
