Hoe u kunt bevestigen dat GoogleBot en andere Google -zoekrobots daadwerkelijk naar uw site gaan via Google

U kunt controleren of de webrobot die tot uw server verandert een echte GoogleBot is. Dit is handig als u zich zorgen maakt dat spammers of andere aanvallers toegang hebben tot uw site en doen alsof ze GoogleBot zijn.

Google Robots zijn verdeeld in drie categorieën:

Google Robots, kijk op uw Google -website

Beschrijving van Google Robots die uw site kunnen bezoeken, evenals hun bijbehorende IP -bands:

Gewone Google -robots op uw Google -website

Dit zijn robots die worden gebruikt voor Google -producten, zoals GoogleBot. Deze robots volgen altijd Robots.txt -regels voor automatische bypasses.

Voorbeelden van domeinen: Crawl-***-***-***-***. GoogleBot.com of Geo-Crawl-***-***-***-***. Geo.googebot.com

Voorbeeld JSON -bestand: GoogleBot.json

Speciale Google Robots op uw Google -website

Deze robots voeren specifieke functies uit voor Google -producten (bijvoorbeeld ADSBOT) wanneer er een overeenkomst is tussen de website en het product over het proces van bypass. Deze robots kunnen robots.txt -regels of niet kunnen volgen.

Voorbeeld: tarief-beperkte proxy-***-***-***-***. Google.com, special-crawlers.json

Robots geactiveerd door de gebruiker op uw site op Google

Deze tools en producten van producten waarbij de eindgebruiker het gegevensverzoek activeert. Bijvoorbeeld, Google Site Verifier, die op verzoek van de gebruiker wordt gestart. Deze robots negeren robots.txt regels.

Voorbeeld: ***-***-***-***. Gae.googleUserContent.com of Google-proxy-***-***-***-***. Google.com.

GoogleBot -testmethoden op uw Google -website

Er zijn twee manieren om te controleren of de GoogleBot Web Robot is:

Handmatige methode: Gebruik voor enkele controles opdrachttools. Deze methode is geschikt voor de meeste gevallen.
Automatische manier: Gebruik voor massa-inspecties een automatische oplossing om het IP-adres van de robot te vergelijken met gepubliceerde IP-bands GoogleBot.

Opdrachttools gebruiken om GoogleBot te controleren op uw Google -website

Voer het omgekeerde DNS -verzoek uit naar het IP -adres dat uw server aanpakt met behulp van de opdracht Host.
Zorg ervoor dat de domeinnaam overeenkomt met een van de volgende zaken: GoogleBot.com, Google.com of GoogleUserContent.com.
Voer de rechte DNS-Request uit naar de domeinnaam die in de vorige stap is verkregen met behulp van de opdracht Host.
Zorg ervoor dat de domeinnaam overeenkomt met het oorspronkelijke IP -adres, dat in uw logboeken is opgenomen.

Voorbeeld 1:

host 66.249.66.11
66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.
host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

Voorbeeld 2:

host 35.247.243.240
240.243.247.35.in-addr.arpa domain name pointer geo-crawl-35-247-243-240.geo.googlebot.com.
host geo-crawl-35-247-243-240.geo.googlebot.com
geo-crawl-35-247-243-240.geo.googlebot.com has address 35.247.243.240

Voorbeeld 3:

host 66.249.90.77
77.90.249.66.in-addr.arpa domain name pointer rate-limited-proxy-66-249-90-77.google.com.
host rate-limited-proxy-66-249-90-77.google.com
rate-limited-proxy-66-249-90-77.google.com has address 66.249.90.77

Automatische oplossingen gebruiken om GoogleBot te controleren op uw Google -website

U kunt GoogleBot ook identificeren op IP -adres door het te vergelijken met gepubliceerde IP -adressen voor GoogleBot en andere Google Robots:

Gewone robots zoals GoogleBot
Speciale robots zoals ADSBOT
Verzoeken geactiveerd door de gebruiker (gebruikers)
Verzoeken geactiveerd door de gebruiker (Google)

Voor andere Google IP -adressen, van waaruit toegang tot uw site (bijvoorbeeld voor applicaties) kan worden gemaakt, vergelijkt u het IP -adres met de algemene lijst met Google IP -adressen. Houd er rekening mee dat het IP -adres in JSON -bestanden wordt gepresenteerd in CIDR -indeling.

Als u vragen of hulp heeft, kunt u per e -mail contact opnemen met het SEO -bedrijf "SEO.COMPUTER" info@seo.computer Of whatsapp +79202044461.

ID 41