Tinggalkan permintaan
GoogleBot adalah nama umum untuk dua jenis robot web yang digunakan dalam pencarian Google:
Anda dapat menentukan subtipe GoogleBot dengan melihat judul HTTP USR-Agent. Namun, kedua jenis robot tersebut berada di bawah token produk yang sama (token pengguna-agen) di robots.txt, sehingga Anda tidak dapat memilih salah satunya (smartphone GoogleBot atau desktop GoogleBot) menggunakan robots.txt.
Untuk sebagian besar situs, pencarian Google pertama -tama indeks versi konten seluler. Oleh karena itu, sebagian besar permintaan dari GoogleBot akan dibuat menggunakan robot seluler, dan minoritas - menggunakan robot desktop.
Untuk sebagian besar situs GoogleBot, situs Anda tidak boleh mengunjungi situs Anda lebih dari sekali setiap beberapa detik rata -rata. Namun, karena penundaan, dapat diharapkan bahwa indikator ini akan sedikit lebih tinggi dalam interval waktu singkat. Jika situs Anda tidak punya waktu untuk mengatasi permintaan GoogleBot, Anda dapat mengurangi kecepatan bypass.
GoogleBot dapat memindai 15 MB -file pertama atau file teks yang didukung. Setiap sumber daya yang mengacu pada, seperti CSS atau JavaScript, dimuat secara terpisah, dan setiap permintaan dibatasi oleh batas yang sama dalam ukuran file. Setelah 15 MB pertama, file berhenti memindai, dan hanya 15 MB file yang dikirimkan untuk pengindeksan. Batas ukuran diterapkan pada data yang tidak terkompresi. Robot Google lainnya, seperti Video GoogleBot dan gambar GoogleBot, mungkin memiliki batasan lainnya.
Saat bepergian dari alamat IP di AS, Zona Waktu GoogleBot adalah waktu Pasifik.
Karakteristik teknis lainnya dari GoogleBot dijelaskan dalam ulasan Google Robot.
GoogleBot menemukan URL baru untuk jalan memutar terutama melalui tautan yang dibangun ke halaman yang sudah dikunjungi. Hampir tidak mungkin untuk menyembunyikan situs tanpa menerbitkan tautan ke sana. Misalnya, segera setelah seseorang melintasi tautan dari situs "rahasia" Anda ke situs lain, URL situs "rahasia" Anda dapat muncul di tag pengirim dan akan dilestarikan dan diterbitkan oleh situs lain di lognya.
Jika Anda ingin mencegah bypass GoogleBot di situs Anda, Anda memiliki beberapa opsi. Ingatlah bahwa ada perbedaan antara bypass dan indeksasi: GoogleBot memblokir dari berkeliling halaman tidak akan mencegah URL halaman ini muncul dalam hasil pencarian:
GoogleBot Blocking memengaruhi pencarian Google (termasuk Discover dan semua fungsi pencarian Google), serta produk lain seperti gambar Google, Google Video dan Google News.
Sebelum Anda memutuskan untuk memblokir GoogleBot, penting untuk dipahami bahwa http-head USR-agent yang digunakan oleh GoogleBot sering dipalsukan oleh robot lain. Oleh karena itu, penting untuk memeriksa bahwa permintaan tersebut benar -benar berasal dari Google. Cara terbaik untuk mengonfirmasi bahwa permintaan berasal dari GoogleBot adalah dengan menjalankan posting DNS terbalik pada alamat IP awal permintaan atau untuk memantau alamat IP dengan alamat IP GoogleBot.
Jika Anda memiliki pertanyaan tentang SEO atau Anda memerlukan konsultasi, Anda dapat menghubungi teman SEO kami melalui email info@seo.computer atau whatsapp: +79202044461.
ID 59
