selam arkadaşlar.
blogspot'tan hazırladığım bir sitem var ve robots.txt dosyası şöyle:
"User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search"
bunun üzerine birkaç blogspot robots.txt'ine daha baktım ve onlarda da /search kısmının disallow olduğunu gördüm. blogspot otomatikman böyle ayarlıyor sanırım. bu disallow olayını nasıl kaldırabilirim? çünkü google webmaster tools'a girdiğimde 255 adet url'umun "robots.txt ile kısıtlanan url'lar" başlığı altında uyarılara eklendiğini gördüm. o linkleri tarayamıyor yani. blogspot'ta da etiketlerde çok sık kullanılan bişey bu. yani adres http://www.domain.com/search/label/xxx gibi oluyor.
blogspot'ta robots.txt dosyasının nasıl değiştirilebildiğini öğrensem bana yeticek.
yardımcı olursanız sevinirim.
blogspot'tan hazırladığım bir sitem var ve robots.txt dosyası şöyle:
"User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search"
bunun üzerine birkaç blogspot robots.txt'ine daha baktım ve onlarda da /search kısmının disallow olduğunu gördüm. blogspot otomatikman böyle ayarlıyor sanırım. bu disallow olayını nasıl kaldırabilirim? çünkü google webmaster tools'a girdiğimde 255 adet url'umun "robots.txt ile kısıtlanan url'lar" başlığı altında uyarılara eklendiğini gördüm. o linkleri tarayamıyor yani. blogspot'ta da etiketlerde çok sık kullanılan bişey bu. yani adres http://www.domain.com/search/label/xxx gibi oluyor.
blogspot'ta robots.txt dosyasının nasıl değiştirilebildiğini öğrensem bana yeticek.
yardımcı olursanız sevinirim.