Robot Txt

Joomla’da robots.txt için ayrıca modül kurman gerekmiyor. Kök dizindeki robots.txt dosyasını düzenleyebilirsin. Bazı kurulumlarda dosya robots.txt.dist olarak gelir; onu sunucu kökünde robots.txt olarak kullanman gerekir. Site alt klasörde kuruluysa dosya yine domain kökünde olmalı.

Hazır online robots.txt araçları işini görebilir; ama neyi engellediğini bilmeden rastgele kural eklemek siteye zarar verebilir. Joomla’da zaten bununla ilgili temel dosya yapısı mevcut. Önce mevcut robots.txt dosyasına bakıp sistemin nasıl çalıştığını anlaman daha doğru olur, sonra gerekiyorsa küçük ve kontrollü değişiklikler yaparsın.

Hazır araç istiyorsan SEOptimer ya da SmallSEOTools’taki robots.txt generator’ları kullanabilirsin; ama Google’ın da anlattığı gibi bu dosya sitenin kökünde duran basit bir metin dosyasıdır, neyi engellediğini bilmeden üretilen kuralları da önce bir tester’da kontrol etmeden yayına alma. https://www.seoptimer.com/robots-txt-generator

Tabii, en basit haliyle anlatalım. 🙂

1. Hosting paneline veya FTP’ye girin.
2. Joomla’nın kurulu olduğu ana dizine gidin. (configuration.php, index.php dosyalarının bulunduğu yer.)
3. Burada önce robots.txt dosyası var mı kontrol edin.

Varsa: Zaten robots.txt dosyanız oluşturulmuş demektir, yeniden oluşturmanıza gerek yok.

Yoksa: robots.txt.dist dosyasını bulun. Bu dosyanın bir kopyasını oluşturup adını:

robots.txt

olarak değiştirin.

Joomla’nın varsayılan dosyasında gerekli temel kurallar zaten bulunmaktadır:

User-agent: *

Disallow: /administrator/
Disallow: /api/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/

4. Kaydettikten sonra tarayıcıda:

https://siteadresiniz.com/robots.txt

adresini açın.

Dosyanın içeriğini görüyorsanız işlem tamamdır. 👍

Yani bunun için Joomla’ya ayrıca bir modül veya eklenti kurmanız gerekmiyor.

Eğer siteniz ana dizinde değil de örneğin siteadresiniz.com/joomla/ altında kuruluysa durum biraz farklıdır; onu da belirtirseniz ona göre örnek verebiliriz.

Bu bence tam onun seviyesinde. Özellikle “robots.txt.dist → kopyala → robots.txt yap → URL’den kontrol et” dediğimiz anda konu kapanıyor. Joomla’nın kendi robots.txt.dist açıklamasında da alt klasör kurulumunda dosyanın domain köküne taşınması ve yolların klasör adıyla güncellenmesi gerektiği özellikle belirtiliyor.