robots.txt Sorunu

Selam,

Arkadaşlar google hesabıma girince.
URL restricted by robots.txt görüyorum, sitemap ta ekleyemiyorum.


eski hali de

User-agent: *
Disallow: /
Disallow: /admincp/
Disallow: /cgi-bin/
Disallow: /modcp/
Disallow: /includes/
Disallow: /clientscript/

idi , sanırım
Disallow: /

yüzünden sorun.

bunun üzerine ;

robots.txt yi sildim durum devam ediyor.

Neden bu durum var, bot siteme de gelmiyor sanırım bu yüzden, robots.txt yi notepad ile yaratıım ismi tam olarak ' robots.txt ' .


Nerede yanlış yapıyorum

Teşekkürler...

olmuyor olmuyor olmuyor

User-agent: *
Disallow: /cgi-bin/

bu şekilde kullan

olmuyor abi, hep disallow heralde bot kontrol etmiyor

robots.txt dosyası http://www.example.com/robots.txt şeklinde mi yani ana dizinde mi

ayrıca tam yolu belirtebilir misin yani şöyle mesela forum dizini nerede http://www.example.com/forum/ da mı yoksa direk ana dizinde mi http://www.example.com gibi

dierk public te

zaten google kendi kendine düzeltti