Halkalı merkez mahallesi fatih cd ozgur apt no 46 , Küçükçekmece , İstanbul , 34303 , TR
Eka Sunucu'nun ücretsiz oluşturucu aracı ile web siteniz için özelleştirilmiş robots.txt dosyası oluşturun. Robots.txt dosyası, arama motoru tarayıcılarına sitenizden hangi sayfa veya dosyaları isteyip isteyemeyeceklerini söyler.
Kullanıcı dostu arayüzümüz sayesinde, yönergeleri manuel olarak yazmak zorunda kalmadan, ihtiyacınız olan seçenekleri seçerek kolayca profesyonel bir robots.txt dosyası oluşturabilirsiniz.
Arama motorlarının sitenizin hangi bölümlerine erişebileceğini kontrol edin
Hassas içerikleri arama motorlarından uzak tutun
Tarayıcıları önemli içeriğe odaklanmaları için yönlendirin
Daha iyi indeksleme için site haritası URL'si ekleyin
Robots.txt dosyası, web yöneticilerinin arama motoru robotlarına (genellikle web tarayıcılarına) web sitelerindeki sayfaların nasıl taranacağını ve indeksleneceğini bildirmek için oluşturdukları bir metin dosyasıdır. Web sitelerinin web tarayıcıları ve diğer web robotlarıyla iletişim kurması için kullanılan Robot Dışlama Protokolü'nün (REP) bir parçasıdır.
Doğru yapılandırılmış bir robots.txt dosyası, sitenizin hangi alanlarının tarandığını kontrol etmenize, arama motorlarının hassas içeriğe erişmesini engellemenize, tarama verimliliğini artırmanıza ve genel olarak sitenizin SEO performansını iyileştirmenize yardımcı olabilir.
Henüz kural eklenmedi. Kural eklemek için yukarıdaki formu kullanın.
Turkey (Türkçe)
Germany (German)
Worldwide (English)
# Standard robots.txt file
User-agent: *
Allow: /
Robots.txt bir yönergedir, güvenlik önlemi değildir. Kötü botlar bu talimatları yok sayabilir, bu nedenle hassas bilgileri gizlemek için kullanmayın.
Robots.txt dosyası, etkili olabilmesi için web sitenizin kök dizinine (örn. www.example.com/robots.txt) yerleştirilmelidir.
Farklı arama motorları robots.txt dosyalarını farklı şekilde yorumlayabilir. Bazıları tüm yönergelere uyarken, diğerleri yalnızca temel komutları destekler.
Robots.txt dosyasında site haritası URL'nizi belirtmek, arama motorlarının web sitenizin içeriğini keşfetmesine ve verimli bir şekilde taramasına yardımcı olur.
Robots.txt dosyaları hakkında yaygın sorular ve cevaplar
Robots.txt dosyası, aşağıdaki formatta yönergeler içeren düz bir metin dosyası olmalıdır:
User-agent: [robot adı]
Disallow: [taranmayacak URL yolu]
Allow: [taranacak URL yolu]
Farklı tarayıcılar için kurallar belirtmek üzere birden fazla User-agent bölümünüz olabilir. User-agent satırı, kuralların hangi tarayıcı için geçerli olduğunu belirtir, * ise tüm tarayıcılar için geçerli bir joker karakterdir.
Evet, ancak destek arama motoruna göre değişir. Google, Bing ve bazı diğerleri, * joker karakterini (herhangi bir karakter dizisini eşleştirir) ve $ karakterini (URL'nin sonuyla eşleşmeyi belirtir) destekler. Örneğin:
Disallow: /*.php$ (.php ile biten tüm URL'lere erişimi engeller)
Disallow: /private* (/private ile başlayan tüm URL'lere erişimi engeller)
Arama motorları genellikle sitenizi her ziyaret ettiklerinde güncellenmiş bir robots.txt dosyası olup olmadığını kontrol eder, bu da aktif siteler için günlük olabilir. Ancak, tüm arama motorlarının değişiklikleri tanıması ve tam olarak uygulaması, sitenizi ne sıklıkta taradıklarına bağlı olarak birkaç saatten birkaç haftaya kadar sürebilir.
Mutlaka değil. Robots.txt bir sayfanın taranmasını engelleyebilse de, sayfanın arama sonuçlarında görünmeyeceğini garanti etmez. Diğer sayfalar engellenen sayfanıza açıklayıcı metinlerle bağlantı veriyorsa, arama motorları içeriğini taramadan URL'yi dizine ekleyebilir. Bir sayfanın arama sonuçlarında tamamen görünmesini engellemek için, "noindex" meta etiketi veya başlığını kullanın.
Robots.txt bir tarayıcının bir sayfaya erişip erişemeyeceğini kontrol ederken, meta robots etiketleri bir tarayıcının bir sayfayı dizine ekleyip ekleyemeyeceğini ve arama sonuçlarında nasıl sunulması gerektiğini kontrol eder. Robots.txt dosyası sunucu düzeyinde site genelinde bir kontroldür, meta robots etiketleri ise HTML kodundaki sayfaya özgü kontrollerdir. Tam kontrol için, çoğu zaman her ikisi de koordineli bir SEO stratejisinde birlikte kullanılır.