robots.txt taramayı, noindex ise indekslemeyi kontrol eder. Sayfa robots.txt ile engellenirse Google noindex etiketini göremeyebilir. Bu yüzden kaldırma, tarama verimliliği ve gizlilik amaçları birbirinden ayrılmalıdır.
Blocked by robots.txt
Indexed, though blocked by robots.txt
Excluded by 'noindex' tag
robots.txt taramayı, noindex ise indekslemeyi kontrol eder. Sayfa robots.txt ile engellenirse Google noindex etiketini göremeyebilir. Bu yüzden kaldırma, tarama verimliliği ve gizlilik amaçları birbirinden ayrılmalıdır.
Tarama, indeksleme, canonical, performans veya sıralama sorununu birbirinden ayırın.
Google’ın kayıtlı verisiyle güncel HTTP, HTML, header ve render çıktısını karşılaştırın.
Canonical, sitemap, iç link, robots ve yönlendirmelerin aynı URL niyetini gösterdiğini doğrulayın.
Teknik uygunluğun indeks veya sıralama garantisi olmadığını dikkate alarak içeriği geliştirin.
Gizli veya hassas veriyi yalnız robots.txt ile korumayın.
Anlamı: Google sayfada indeks engeli gördü.
Muhtemel neden: Meta robots, googlebot veya X-Robots-Tag.
Anlamı: Googlebot URL içeriğine erişemiyor.
Muhtemel neden: Disallow kuralı.
Anlamı: Google içeriği taramadan URL’yi bağlantı sinyaliyle indekslemiş olabilir.
Muhtemel neden: Robots engeli noindex yerine kullanılmış.
Anlamı: Sitemap URL’si robots kuralıyla çelişiyor.
Muhtemel neden: Yanlış Disallow veya sitemap sorgusu.
Anlamı: HTML temiz olsa bile header indekslemeyi kapatıyor.
Muhtemel neden: CDN, framework veya dosya türü kuralı.
Anlamı: Google render için gereken kaynaklara erişemiyor.
Muhtemel neden: Geniş asset Disallow kuralı.
Anlamı: Kural değişikliği anında yansımayabilir.
Muhtemel neden: Google robots dosyasını cache’ler.
Anlamı: Google robots.txt içindeki noindex satırını desteklemez.
Muhtemel neden: Eski/yanlış öneri.
Bu ifadeyle eşleşen kayıt bulunamadı.
curl -s https://example.com/robots.txt
Yayınlanan robots.txt içeriğini gösterir.
curl -sSI -A 'Googlebot' https://example.com/robots.txt
Googlebot’a verilen HTTP cevabını kontrol eder.
curl -sL https://example.com/sayfa | grep -ioE '<meta[^>]+(robots|googlebot)[^>]*>'
HTML robots meta etiketlerini gösterir.
curl -sI https://example.com/sayfa | grep -i 'x-robots-tag'
HTTP header indeks direktifini gösterir.
curl -sL https://example.com/sayfa | grep -oE '(src|href)="[^"]+\.(css|js)' | head -n 20
Kritik CSS/JS kaynaklarını listeler.
python3 - <<'PY'
import urllib.robotparser
r=urllib.robotparser.RobotFileParser('https://example.com/robots.txt'); r.read(); print(r.can_fetch('Googlebot','https://example.com/sayfa'))
PY
Basit robots kural eşleşmesini test eder.
Ayarlar > Okuma, SEO eklentisi ve staging ortamından taşınan noindex kuralları birlikte kontrol edilmelidir.
Meta robots route veya environment durumuna göre merkezi üretilmelidir.
Tema meta çıktısı, panel SEO alanları ve web server header kuralları çakışabilir.
Teknik engel kaldırıldıktan sonra Google’ın yeniden tarama ve değerlendirme süresi URL, site ve sorun türüne göre değişir; kesin süre veya indeks garantisi yoktur.
Hayır. İstek yalnız yeniden tarama sinyalidir; teknik engel, canonical, içerik kalitesi ve iç link sorunu çözülmediyse sonuç değişmeyebilir.
Hayır. Sitemap keşif ve canonical tercihi için yardımcı sinyaldir; tarama ve indeks garantisi vermez.
Eklenti meta ve sitemap üretimini kolaylaştırır ancak içerik, sunucu, iç link, canonical ve Search Console analizini tek başına çözmez.
Google teknik bir karakter sınırı belirtmez; sonuç görünümü cihaz ve sorguya göre kısalabilir. Başlık kısa, açıklayıcı ve benzersiz tutulmalıdır.
Google FAQ zengin sonuç özelliğini 7 Mayıs 2026 itibarıyla kaldırdı. FAQ bölümü kullanıcı faydası için tutulabilir ancak zengin sonuç garantisi yoktur.
Hayır. Rehber teknik ve içerik sorunlarını sistematik çözmeye yardımcı olur; sıralama rekabet, kalite, otorite, kullanıcı ihtiyacı ve Google sistemlerine bağlıdır.
İndeksleme, sitemap, canonical, Core Web Vitals, schema ve organik trafik sorunlarını WordPress, özel PHP ve WISECP altyapılarında birlikte inceliyoruz.