Teknik SEO Sıralaması Faktörleri: İkinci Bölüm

Makalenin ilk kısmı.

Detaylara girmek istemiyorsanız uzmanlarla iletişime geçin ve sistemimizi ücretsiz test edin!

robots.txt dosyasını yönetme

Robots.txt dosyası, sitenizin arama motorları tarafından nasıl dizine eklendiğini kontrol etmek için kullanılır. Sitenin hangi sayfalarının veya dizinlerinin indekslenmesi gerektiğini ve hangilerinin indekslenmemesi gerektiğini belirlemenizi sağlar.

Bu dosyayla çalışmanın temel kuralları şunlardır:

• Bu, düz metin biçiminde (ASCII veya UTF-8) kaydedilmesi ve robots.txt olarak adlandırılması gereken bir metin dosyasıdır.
• Dosya, Microsoft Word gibi özel format editörleri yerine Notepad gibi metin editörlerinde oluşturulur.
• Robots.txt dosyası sitenizin kök dizininde bulunmalıdır. Örneğin, adresindeki bir site için http://örnek.com, dosya http://example.com/robots.txt adresinde bulunmalıdır.
• Belirli CMS'lerle oluşturulan siteler için otomatik olarak bir robots.txt dosyası oluşturulabilir.

Robots.txt dosyasının içinde tarayıcı, Kullanıcı aracısı alanıyla başlayan yönergeleri kontrol eder. Bu alan, ilgili indeksleme kuralının geçerli olduğu belirli arama motoru robotunu belirtir.

Bir web sitesindeki adresleri açıklarken, herhangi bir karakter dizisini ifade eden evrensel "*" sembolünü kullanabilirsiniz. Bu, bir dizine veya sayfaya giden yolun önekini veya son ekini belirtmenize olanak tanır.

Robots.txt dosyasında kullanılabilecek bazı temel yönergeler şunlardır:

• - Disalov: Arama robotu tarafından hangi sayfaların veya dizinlerin indekslenmemesi gerektiğini belirtir. Bir dizin adı belirtilirse yolun eğik çizgiyle bitmesi gerekir.
• - Allov: Bu yönerge Disallow yönergesi tarafından kısıtlanmış olabilecek belirli sayfaların veya dizinlerin dizine eklenmesine izin verir. Farklı yolları belirtmek için "*" sembolü desteklenir.
• Site haritası: Site Haritası dosyasının yolunu belirtir. İsteğe bağlı olabilir ve birden fazla kopya halinde görünebilir. Site haritası, arama motorlarının site sayfalarını daha hızlı dizine eklemesine yardımcı olur.
• Bilinmeyen yönergeler göz ardı edilerek dosyaya yorum eklenmesine olanak sağlanır.

Robots.txt dosyası gereksinimlerinin arama motoruna bağlı olarak biraz değişebileceğini de belirtmekte fayda var. Yandex veya Google gibi popüler sistemlere yönelik en son önerileri öğrenmek için bu sistemlerin resmi kaynaklarına göz atın.

Sorularınız olması durumunda SEO stüdyomuzun uzmanlarına info@seo.computer adresine yazarak her zaman ulaşabilirsiniz.

Kimlik 9119