Robot.txt anlayan bir baksın?

karasuvari

Arkadaşlar kullandıgım robot.txt' yi google web yönetici aracları-kontrol panalinden baktıgımda sitem için şöyle yazıyor:

Bazı önemli sayfalar robots.txt tarafından engellendi. Daha Fazla Bilgi

işin ilginci aynı robot.txt yi başka bir sitemde de kullanıyorum ama onda bu uyarıyı vermiyor.

robot.txt min içeriğinde nerde yanlışlık var yardımcı olursanız sevinirim:harika:

Kod:

# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://www.xxx.com/sitemap-misc.xml
Sitemap: http://www.xxx.com/sitemap-tax-post_tag.xml	
Sitemap: http://www.xxx.com/sitemap-tax-category.xml	
Sitemap: http://www.xxx.com/sitemap-pt-page-2012-03.xml
# END XML-SITEMAP-PLUGIN
User-agent: *
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.wmv$
Disallow: /*.tar$
Disallow: /*.tgz$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /wp-includes/
Disallow: */trackback/
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Allow: /
User-agent: Googlebot-Image
Allow: /
User-agent: Mediapartners-Google
Allow: /
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /
Sitemap: http://www.xxx.com/sitemap-misc.xml
Allow: /
Sitemap: http://www.xxx.com/sitemap-tax-category.xml 
Disallow: /*ref=*

kuzgun · 1 Nisan 2012

sonuna eklediğin $ karakteri nedir?

bomonti · 1 Nisan 2012

success HTTP status 200 for h_t_t_p://www.xxx.com/robots.txt
time: 0.141834 seconds
total length: 550 characters

HTTP/1.1 200 OK
Connection: close
Date: Sun, 01 Apr 2012 23:19:51 GMT
Accept-Ranges: bytes
ETag: "6c70ffb-c1-4bb2992652cc0"
Server: Apache/2.2.3 (CentOS)
Content-Length: 193
Content-Type: text/plain; charset=UTF-8
Last-Modified: Wed, 14 Mar 2012 01:05:31 GMT
Client-Date: Sun, 01 Apr 2012 23:19:51 GMT
Client-Peer: 67.23.112.226:80
Client-Response-Num: 1

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /cache/
Disallow: /content/
Disallow: /ftp_content/
Disallow: /includes/
Disallow: /process/

Sitemap: _http://www.xxx.com/sitemap.xml

şeklinde gözüküyor bana göre bir problem yok. _ tarafımdan eklendi. Google web master tools bazen hatalı sonuçlarda hatalı uyarılar yapabiliyor.
Robot.txt ve Robots.txt hangisi ?

karasuvari · 1 Nisan 2012

sonuna ekledigim $ işareti nedir bende bilmiyorum copy paste yapmıştım bir wp anlatımından

işin komik tarafı aynı rovot.txt başka bir sitemde sorun vermiyor aslında sorun verip vermedigi de mechul bana göre sadece webmaster tool da öyle diyor

bomonti robot.txt ve robots.txt. hangisi derken ?

kuzgun · 1 Nisan 2012

wm toolsa göndereceğin dosyanın adı robots.txt olmalı, sen robot.txt olarak göndermediğine eminmisin

karasuvari · 1 Nisan 2012

robots.txt diye attım sunucuya