phpbb3 kullanıyorum. robots.txt yi gönderdikten sonra google web yöneticisi araçları - tarama hataları içerisinde yaklaşıl 15 adet linkin engellendiğini gördüm. ücretli bir seo hizmeti kullandım, hizmeti veren yerin robots.txt dosyasını aşağıya ekliyorum. İlgilenebilen olursa sevinirim.
|
|
Çok eski bir web tarayıcısı kullanıyorsunuz. Bu veya diğer siteleri görüntülemekte sorunlar yaşayabilirsiniz..
Tarayıcınızı güncellemeli veya alternatif bir tarayıcı kullanmalısınız.
Tarayıcınızı güncellemeli veya alternatif bir tarayıcı kullanmalısınız.
phpBB 3 robots.txt de hata mı var ?
- Konbuyu başlatan Horoz
- Başlangıç tarihi
Konular indexleniyor, bunda sıkıntım yok. Dün 15 olan engellenen link sayısı bugn 53. Ama sizin dediğiniz gibiymiş. Dikkat edince seo çalışmasından önceki linkleri kaldırmaya çalıştığını gördüm. Çünkü aynı konu yeni hali ile linkleniyordu.
Benim yazdığım robots.txt, aşağıda tek tek açıklıyorum:
Eski tip URL adreslerinin olması durumundaki sakıncaları gidermek için cannonical URl dediğimiz metalar kullanılıyor.
robots.txt ile ilgili olmayan ancak index sayısı ile ilgili olabilecek bnir şeyi yazmak istiyorum.
* Botlar ve misafirler forum genelinde kullanıcı adlarını linksiz olarak görürler, bir şekilde kullanıcı profiline ulaşılırsa "Kullanıcı listesini görme izniniz bulunmamaktadır" hatası ile karşılaşılır. (forum.com/alexis-u2)
* Botlar arama sayfasına erişemez, "Arama sistemini kullanma izniniz bulunmamaktadır." hatası gösterilir.
* Botlar ve misafirler kullanıcı imzalarını görmezler.
* Konu ve iletilere yazılan linkler otomatik şekilde nofollow olur.
Özellikle profil sayfalarının engellenmesi birden index düşümü gibi algılanabilir, ancak profil sayfaları gereksiz index ten başka bir şey değildir. Ne kadar çok index o kadar iyidir düşüncesi yanlıştır. Sayfa içeriği daha önemlidir.
Kod:
# www.robotstxt.org
# www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156449
User-agent: *
# ref saldırısı için önlem
# NOT: çoğu yerde * karakteri kullanılıyor, wordpress in verdiği resmi örnekte bile,
# ancak robotstxt.org da * diye bir joker kullanımı olmadığı yazıyor.
# Acaba arama botları robotstxt.org protokolüne uyuyor mu ?
Disallow: /*?ref=
Disallow: /*ref=*
Disallow: /?ref=
# Seo öncesi eski tip url adreslerini engelle, zamanla indexten düşerler ayrıca google webmaster araçlarında index kaldırmada da işe yarar
Disallow: /viewtopic.php
Disallow: /viewforum.php
# index.php yerine forum.html kullnılıyor
Disallow: /index.php
# Arama sayfasında bir içerik yok, bazen son aranan kelimeler listelenir
Disallow: /search.php
Disallow: /search.php?
# Bu sayfalar üyelik gerektirir. Google bot un bunları görmesine pek imkan yok, ama bir şekilde karşılaşırsa indexlemesin
Disallow: /posting.php
Disallow: /ucp.php
Disallow: /mcp.php
Disallow: /memberlist.php
# Yardım sayfası, her phpbb forumunda tıpatıp aynısı bulunur, kopya içerik olmasın diye engelle
Disallow: /faq.php
# Bir müşterim bu tür gereksiz indexlemeye maruz kaldığını bildirmişti, o zaman eklemiştim, gerçi eskidi bunlar, yeni sürüm seo da bunlardan yok
Disallow: /post
Disallow: /member
# sitemap - GYM - advanced seo destekli varsayılan sitemap adı
Sitemap: /sitemapindex.xmlEski tip URL adreslerinin olması durumundaki sakıncaları gidermek için cannonical URl dediğimiz metalar kullanılıyor.
robots.txt ile ilgili olmayan ancak index sayısı ile ilgili olabilecek bnir şeyi yazmak istiyorum.
* Botlar ve misafirler forum genelinde kullanıcı adlarını linksiz olarak görürler, bir şekilde kullanıcı profiline ulaşılırsa "Kullanıcı listesini görme izniniz bulunmamaktadır" hatası ile karşılaşılır. (forum.com/alexis-u2)
* Botlar arama sayfasına erişemez, "Arama sistemini kullanma izniniz bulunmamaktadır." hatası gösterilir.
* Botlar ve misafirler kullanıcı imzalarını görmezler.
* Konu ve iletilere yazılan linkler otomatik şekilde nofollow olur.
Özellikle profil sayfalarının engellenmesi birden index düşümü gibi algılanabilir, ancak profil sayfaları gereksiz index ten başka bir şey değildir. Ne kadar çok index o kadar iyidir düşüncesi yanlıştır. Sayfa içeriği daha önemlidir.