リクエストを残す
GoogleBotは、Google検索で使用される2種類のWebロボットの一般名です。
USR-AgentのHTTP見出しを調べることにより、GoogleBotサブタイプを決定できます。ただし、両方のタイプのロボットは、robots.txtで同じ製品トークン（ユーザーエージェントトークン）に従属しているため、robots.txtを使用してそのいずれか（GoogleBotスマートフォンまたはGoogleBotデスクトップ）を選択することはできません。
ほとんどのサイトでは、Googleは最初にすべてのインデックスを検索し、モバイルバージョンのコンテンツを検索します。したがって、GoogleBotからのほとんどのリクエストは、デスクトップロボットを使用してモバイルロボットと少数派を使用して行われます。
ほとんどのGoogleBotサイトでは、サイトは平均して数秒ごとに1回以上サイトにアクセスしてはなりません。ただし、遅延のため、このインジケータは短い時間間隔でわずかに高くなることが予想されます。サイトにGoogleBotリクエストに対処する時間がない場合は、バイパスの速度を下げることができます。
GoogleBotは、最初の15 MBファイルまたはサポートされているテキストファイルをスキャンできます。 CSSやJavaScriptなどを参照する各リソースは個別にロードされ、各要求はファイルのサイズが同じ制限によって制限されます。最初の15 MBの後、ファイルはスキャンを停止し、これらの15 MBのファイルのみがインデックスのために送信されます。サイズの制限は、非圧縮データに適用されます。 GoogleBotビデオやGoogleBot画像など、他のGoogleロボットには他の制限がある場合があります。
米国のIPアドレスから移動するとき、GoogleBotタイムゾーンは太平洋時間です。
GoogleBotのその他の技術的特性は、Google Robot Reviewに記載されています。
GoogleBotは、主に既に訪問されたページに組み込まれているリンクを介して、迂回路の新しいURLを見つけます。リンクを公開せずにサイトを非表示にすることはほとんど不可能です。たとえば、誰かが「秘密」サイトから別のサイトへのリンクを越えるとすぐに、「秘密」サイトのURLがリファラータグに表示され、そのログに別のサイトによって保存および公開されます。
サイトでGoogleBotバイパスを防ぐ場合は、いくつかのオプションがあります。バイパスとインデックスの間には違いがあることを忘れないでください。GoogleBotブロックがページを回るのをブロックしても、このページのURLが検索結果に表示されないようにします。
GoogleBotブロッキングは、Google Images、Google Video、Google Newsなどの他の製品だけでなく、Google検索（DiscoverおよびすべてのGoogle検索機能を含む）に影響します。
GoogleBotをブロックする前に、GoogleBotが使用するUSR-Agent HTTP-Headが他のロボットによって偽造されることが多いことを理解することが重要です。したがって、リクエストが本当にGoogleから来ていることを確認することが重要です。 GoogleBotからのリクエストが届くことを確認する最良の方法は、リクエストの最初のIPアドレスで逆DNS投稿を実行するか、GoogleBot IPアドレスでIPアドレスを監視することです。
SEOについて質問がある場合、または相談が必要な場合は、メールでSEOコンパニオンに連絡できます。 info@seo.computer またはwhatsapp： +79202044461。
ID 59
