robots.txt dosyası, arama motoru tarayıcılarının sitenizde erişmesini istemediğiniz yerleri gösteren ve sitenizin kök dizininde bulunan bir dosyadır. Dosya, küçük bir komut setine sahip bir protokol olan Robotları Engelleme Standardı'nı kullanır. Bu komutlar, sitenize erişimi bölüm bazında ve belirli web tarayıcısı türüne göre (örneğin mobil tarayıcılar ve masaüstü tarayıcılar gibi) göstermek için kullanılabilir.

İşte üretilen kod. Boş bir .htaccess dosyası içine yapıştırın ya da yukarıdaki indir düğmesine tıklayınız.

Kodunuzun burada görünmesi için Kod Oluştur butonuna tıklayın.