kendi örümceğimizi yapabilirmiyiz?

echo · 14 Haziran 2006

evet merak ettiğim bir konu siteleri arama motorlarından tarayacak ve uygun olanları bizim db mize ekleyecek örümcekler yapabilirmiyiz?

bu konuda hiç bir fikrim yok.bilgileri paylaşan arkadaşlara şimdiden teşekkürler.

beceriksiz_acemi · 14 Haziran 2006

perl ile yazılmış bir arama motoru örneği dilersen ;

www.xav.com adresinde var.Aslında bunu alıp gelişdirebilirsinde.

UguG · 14 Haziran 2006

Ben ne gerekir bilmiyorum ama gerekli yazılım artık ne olduğunuda bilmiyorum php asp perl ya da her neyse gerekli dili biliyorsan yazabilirsin çünkü forumda bu tür örümcek denilen botlar yazanları gördüm.

hatta bir arkadaşım (bilgisayar mühendisliği bitirdi) bir bot yazmıştı, bilgisayarı açıp onu çalıştırdığında gerekli bazı şeyleri aynı örümcek gibi yapıyordu.

umurcan · 14 Haziran 2006

beceriksiz_acemi' Alıntı:
perl ile yazılmış bir arama motoru örneği dilersen ;

www.xav.com adresinde var.Aslında bunu alıp gelişdirebilirsinde.

güzelmiş sağol

webyazilim · 14 Haziran 2006

yazılır tabi ki. php pek çok kütüphaneye sahip pear gibi. curl falanda kullanılırsa tarama hızı artacaktır. mysql de vt olur. ben bunun fiyat motoru şeklini düşünüyorum aslında. türkiye için akakce.com gibi. ama vakit yok bir sürü iş var.

SeVeRaL · 14 Haziran 2006

echo' Alıntı:
evet merak ettiğim bir konu siteleri arama motorlarından tarayacak ve uygun olanları bizim db mize ekleyecek örümcekler yapabilirmiyiz?

bu konuda hiç bir fikrim yok.bilgileri paylaşan arkadaşlara şimdiden teşekkürler.

Bahsettiğin şey crawler olarak tabir edilen ve örneğin mp3 sitesindeki mp3 adreslerini çeken bir programsa, bunları yazmak basit. Fakat bu içerik hırsızlığı olarak da nitelenebilecek bir şey.
Ama yok "ben siteye girsin, bütün linkleri ziyaret edip onları indexlesin istiyorum" dersen bu biraz daha karmaşık bir sistem olur. Yazması o kadar da kolay olmaz.

Nurettin · 15 Haziran 2006

SeVeRaL mp3leri bulacak diyorsun güzel bir bot olur aslında

)

beceriksiz_acemi · 15 Haziran 2006

Nurettin' Alıntı:
SeVeRaL mp3leri bulacak diyorsun güzel bir bot olur aslında )

mevcut.Tüm arama motorlarında bu özellik video olarak bulunmakta.

iletiler · 15 Haziran 2006

yapabilirsin,

visual basic ile yapabilirsin, eğer biliyorsan tabiiki,

mesela bende siteleri dolaşıp sitelerdeki eposta adreslerini toplayan bir eposta örümceği nin kodları var

ama tabiiki böyle bişey yapmadım, yani spam olayına girmedim,

diyeceğim şu ki bunu yapabilirsin.

ASP bilgin var ise , ASPTEAR ile de istediğin bilgileri sitelerden çekip DB ye aktarabilirsin..

echo · 15 Haziran 2006

şu anda pek bi bilgim yok ilersi açısından ön bilgi ve bbirazda merak amaçlı araştırıyorum

sverdlow · 15 Haziran 2006

Evet yapılabilir, eğer googlebot veya diğer msn gibi botların algoritması biraz daha karışık olabilir ama, çok da zor olmayan bir mantığı var.
Diğer dilleri bilmiyorum ama bot için php içerisinde gerekli bütün fonksiyonlar mevcut.

firar · 15 Haziran 2006

bir arkadaşım asp ile böyle bir örümceği yarım günde yapabildiğini söylemişti buna imkan var dimi?

SeVeRaL · 15 Haziran 2006

Ya arkadaşlar bu bahsettiğimizin adı örümcek olmaz. Crawler.
Ve yarım gün değil 15 dk'da da yapılır crawler. Yazarsın bir sitedeki (yemek tarifi, mp3, lyric, tanıtım vs) tüm veriyi sırayla çeker. Her site için mümkün olmayabilir bu script. Ama sonuçta yapılır..

echo · 15 Haziran 2006

evet crawler bu daha doğru olabilir google aratınca daha güzel sonuçlar çıkıyor araştırmaya devam....

AkrepList · 15 Haziran 2006

puhahahha www.phpcrawler.com bosmus aldim gitti

kendi örümceğimizi yapabilirmiyiz?

echo

0

0

umurcan

0

0

Nurettin

0

0

echo

0

0

0

echo

0

Backlink ve Tanıtım Yazısı için iletişime geçmek için Skype Adresimiz: .cid.1580508955483fe5