Robots.txt
Robots.txt, bir web sitesinin web tarama botlarına talimatlar vermesini sağlayan bir metin dosyasıdır. Google gibi arama motorlarına, sitenizi dizine eklerken web sitenizin hangi bölümlerine erişebileceklerini ve hangilerine erişemeyeceklerini söyler. Bu, robots.txt'yi SEO için güçlü bir araç haline getirir ve… Daha Fazla Oku »


