Sitenizin indexlenmesi icin ana dizininize

siteniz.com/robots.txt

robots.txt dosyasi olu$turun ve icine $u kodu yazin:


Kod:
User-agent: *allow: /

Bu kod bütün siteyi indexler.Buradaki Kod:
User-agent: *
parametresi bütün arama motorlari sitemi indexlesin demek.
Benim sitemi google indexlesin yeter derseniz

Kod:
Kod:
User-agent:Googlebot
yapmaniz gerekmektedir.bunu tavsiteye etmem hepsi gelsin indexlesin

Arama motorlarinda bulmasini/göstermesini istemediginiz dizin varsa Disallow yapmaniz gerekmektedir.Örnegin admin klasörü yada cgi-bin klasörü gibi dizinler icin iyinet in kodunu inceleyebilirsiniz.


Kod:
Kod:User-agent: *Disallow: /searchDisallow: /groupsDisallow: /imagesDisallow: /catalogsDisallow: /catalog_listDisallow: /newsDisallow: /pagead/Disallow: /imgresDisallow: /keyword/Disallow: /u/Disallow: /univ/Disallow: /cobrandDisallow: /customDisallow: /advanced_group_searchDisallow: /advanced_searchDisallow: /googlesiteDisallow: /preferencesDisallow: /setprefsDisallow: /swrDisallow: /urlDisallow: /wmlDisallow: /hwsDisallow: /bsd?Disallow: /linux?Disallow: /mac?Disallow: /microsoft?
bukadar arkadaslar :-)
insallah i$inize yarar...
saygilar