Görsel oluşturucumuzla saniyeler içinde mükemmel biçimlendirilmiş bir robots.txt dosyası oluşturun veya mevcut dosyanızda Google'ın sitenize girişini sessizce engelleyebilecek hatalar olup olmadığını doğrulayın.
Used to auto-fill the Sitemap URL.
# Loading preview…
Bu kurallar tarafından belirli bir URL'ye izin verilip verilmeyeceğini veya engellenip engellenmeyeceğini test edin.
A robots.txt dosyası web sitenizin köküne yerleştirilen düz metin dosyasıdır (ör. https://yoursite.com/robots.txt). Googlebot gibi arama motoru tarayıcılarına, sitenizin hangi sayfalarını veya bölümlerini tarayıp dizine eklemeleri veya dizine eklememeleri gerektiğini bildirir.
robots.txt gizliliği garanti etmese de (engellenen sayfalar, başka sitelerden bağlantı verildiğinde arama sonuçlarında görünmeye devam edebilir), yönetimin birincil aracıdır tarama bütçesi — Google'ın günde sitenizin ne kadarını araştırdığı. Doğru kullanıldığında, Google'ın taramasını sıralamanız için gerçekten önemli olan sayfalara odaklamasına yardımcı olur.
Özellikle WordPress siteleri için iyi yapılandırılmış bir robots.txt, Googlebot'un yönetici sayfalarında, giriş ekranlarında ve dahili arama sonuçlarında zaman kaybetmesini önler ve bunun yerine tarama bütçesini içeriğinize yönlendirir.
# Allow all crawlers, block admin User-agent: * Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # Block bad bots entirely User-agent: AhrefsBot Disallow: / # Sitemap location Sitemap: https://yoursite.com/sitemap.xml
WordPress varsayılan olarak bir robots.txt dosyası oluşturmaz. Optimum SEO için tam olarak neleri eklemeniz gerektiğini burada bulabilirsiniz.
Yukarıdaki "WordPress" şablonunu seçin, sitenizin URL'sini girin; robots.txt'niz, tüm doğru kurallar önceden doldurulmuş olarak anında oluşturulacaktır.
Oluşturulan robots.txt dosyasını indirin ve FTP, cPanel Dosya Yöneticisi veya ana makinenizin dosya yöneticisini kullanarak sitenizin kök dizinine yükleyin.
Hem Yoast SEO hem de Rank Math, SEO → Araçlar → Dosya Düzenleyici altında yerleşik bir robots.txt düzenleyicisine sahiptir. Oluşturduğunuz içeriği doğrudan oraya yapıştırın.
Profesyonel İpucu: Her Değişiklikten Sonra Doğrulayın
Robots.txt dosyanızı yükledikten veya düzenledikten sonra, hataları kontrol etmek için her zaman yukarıdaki doğrulayıcıyı kullanarak çalıştırın. Tek bir yazım hatası - mesela Disallow: / — sitenizin tamamını bir gecede Google'dan engelleyebilir.
Bunlar, doğrulayıcımızın yakaladığı en yaygın hatalardır ve Google sıralamanızı sessizce yok etme olasılığı en yüksek olanlardır.
A Disallow: / altında User-agent: * Googlebot'u sitenizin tamamından engeller. Bu, en yıkıcı robots.txt hatasıdır ve site oluşturma sırasında düşündüğünüzden daha sık gerçekleşir.
İzin vermeme /wp-content/ Google'ın stil sayfalarınızı ve komut dosyalarınızı yüklemesini engeller. Google, sayfaları bir tarayıcı gibi işler; CSS/JS'yi yükleyemezse içeriğinizi sıralama açısından doğru şekilde değerlendiremez.
Bir dahil değil Sitemap: yönerge, Google'ın site haritanızı yalnızca Search Console gönderimi yoluyla keşfetmesi gerektiği anlamına gelir. Bunu robots.txt dosyasına eklemek, Googlebot'un tüm sayfalarınızı daha hızlı bulmasına yardımcı olan kolay bir kazançtır.
Robots.txt yolları Linux sunucularında büyük/küçük harfe duyarlıdır. Disallow: /Admin/ ENGELLEMEZ /admin/. Her zaman gerçek URL yollarınızın tam harfini kullanın.
Tüm Sitenizin SEO'sunu Düzeltin
Robots.txt dosyanız Google'ın sitenizi taramasına izin verdikten sonra her sayfanın optimize edildiğinden emin olun. SkySEOManager Pro, Gemini AI tarafından desteklenen, WordPress sitenizin tamamında başlıkları, meta açıklamaları ve görsel alt metinlerini toplu olarak oluşturur.
Disallow: /wp-admin/ tarayıcıların tarama bütçenizi SEO değeri olmayan yönetici sayfalarına harcamasını engeller. Ancak mutlaka ekleyin Allow: /wp-admin/admin-ajax.php AJAX'a bağımlı özelliklerin (WooCommerce sepet güncellemeleri gibi) düzgün çalışmasını sağlamak için bir sonraki satıra geçin.Sonsuza kadar özgür. Hesap gerekmez. Robots.txt dosyanız 30 saniyede hazır.