Spider Botlar

• 30 Haziran 2005

• #1

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

forumumda gezinirken birden 17 aktif uye ve 518 misafir gordum. heralde yine birileri ddos saldirisi yapiyor diye dusundum forumu kapattim.

daha sonra arkadas online listten bakip bunlarin hepsi spider bot dedi. ben once inanmadim gidip baktim we gercekten de oyle forumun istatistiklerine baktim

http://www.xturkx.com/forum/statistik.php?do=spider

ve cıkan sonuc

inktomi 99.55 % (449)
msnbot 0.443 % (2)

anlamadigim olay su. nasil bir arama motoru bir siteye ayni anda 518 tane bot salar (arkadas su an uyardi 536 olmus spiderlar )

aslinda baya garibime gitti google o kadar ziyaretine karsin sadece ana sayfayi indexledi.inktominin botlari ise butun basliklari ve profilleri indexliyor (aktif kullanicilardan gozukuyor )

bu olay normalmi?

 

• 30 Haziran 2005

• #2

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

forum coktu

 

• 30 Haziran 2005

• #3

P

PRicon

Misafir

yakında msj'da atmaya kalkar spaydır amcalar ...

O bişi degil , Neyi ne zaman listeliceklerini biliyorlar ....

Benim eski absürt siteye geceleri giriyorlardı

 

• 30 Haziran 2005

• #4

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

usta ona lafim yok. walla saat kavramını bilmio bunlar.

awstats dan baktım aynı anda 1383 tane gelmis diyor ben anlayamadım bi turlu.inktomi yi yahoo aldi peki bu indexlenen sayfalar nerede goruntulencek?

aktif uyelerden baktım spaydırlar forumun altını ustune getirmis walla. 15 sayfa boyunca spaydır kaydı wardi.sunun profiline bakio. giris ekranını goruo.uyarı goruntuluo fln die. bi inktomi kadar olamadi google

 

• 30 Haziran 2005

• #5

A

altar

Misafir

usekes' Alıntı:

forum coktu

Genişletmek için tıkla ...

oha nasıl yani saldırı yapan arama motoru örümceği

 

• 1 Temmuz 2005

• #6

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

usta 1383 tane arama motoru bocugunu forum kaldırmadı.adamlar cidden orumcek gibi her yeri somurdu yani.bilmem kac sayfa spider report wardi

 

• 1 Temmuz 2005

• #7

W

W3BM4ST3R

Misafir

burda gördükten sonra biraz araştırma yaptım..
adamlar indexlemede yeni bir teknoloji kullanıyorlarmış..
crawler (örümcük) deli gibi indexliyormuş tüm neti..
durmadan..

hadi hayırlısı yeni bişiler oluyor ama

 

• 1 Temmuz 2005

• #8

U

ultraturknet

Misafir

Geçen ayki bant genişliği tüketimine baktığımda görümüştüm, Inktomi Slurp 50 küsür mb çekmiş. Diğer spiderların çok çok üstünde.

 

• 1 Temmuz 2005

• #9

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

yeni fln anlamam sitemi gocertti bunun indexledigi sayfalari hangi arama motoru kullancaksa (yahoo almis gerci ya)
cidden googlebotdan daha cok bw tuketmis bu...

 

• 1 Temmuz 2005

• #10

G

graf von beelzebub

0

İyinet Üyesi

Katılım

14 Mart 2005

Mesajlar

274

Reaction score

0

esasta sandıgın gibi 1300 küsür orumcek degil ordaki aynı anda, gelen tek bir spider ama, arama motorunun sunucuları (farklı makinalar, dolayısıyla farklı ip) aralarında bir nevi gorev dagılımı yaptıgından loglardada oyle gozukuyor.
farzı misal: senin sitenin a.html, b.html sayfalarını 1. makine, c.html, d.html sayfalarını 2. makine indexliyor.. gibi.

ama sahidende arama motorları asırı miktarda bw yiyor.insanlar genelde hep yahoo ve google'dan sikayetci ama bana nedense hep msn'in botu musallat oluyor

 

• 14 Temmuz 2005

• #11

P

prismomed

Misafir

ya böyle birşeye hakları olmaması gerekir bence. mesela benim arkadaşlarla aramızda haberleşmek için kurduğumuz bir forumumum var bu kadar olmasa da yine de inktomi slurp bandwithten yiyor ve benim sitemin üzerinden verdiği hizmetten dolaylı da olsa para kazanıyor. adamın sitesi göçmüş orada

 

• 14 Temmuz 2005

• #12

X

Xcoder

0

İyinet Üyesi

Katılım

20 Aralık 2003

Mesajlar

128

Reaction score

0

hangi sitenin botu o ? tam url ne

 

• 14 Temmuz 2005

• #13

S

Senol

0

İyinet Üyesi

Onaylı Üye

Katılım

25 Haziran 2005

Mesajlar

4,856

Reaction score

1

Konum

Bursa

bir spider bot yapmak istiyorum ama bu botlar hakkında hicbir fikrim yok yardimci olabilecek birisi varmi yani nasil kodlanir veya elinde olupta yollamak isdeyen varsa PM atabilir

 

• 15 Temmuz 2005

• #14

U

usekes

0

İyinet Üyesi

Katılım

27 Ağustos 2004

Mesajlar

699

Reaction score

0

Konum

Istanbul

Xcoder' Alıntı:

hangi sitenin botu o ? tam url ne

Genişletmek için tıkla ...

inktomi botları.yani kısaca yahoo ya bagli ve yahoo nun botu. o kadar sayfamı gezdiler ama yahoo da indexli sayfam hic yok nerdeyse.
zaten bu ay akıllandı inktomi gelmedi bidaha