Blog ve Wolkanca » tescilet.net http://blog.wolkanca.com Volkan Yılmaz ve saz arkadaşları // Web günlüğü Sat, 11 Oct 2008 22:37:47 +0000 http://wordpress.org/?v=2.6.2 en Sunucu kaynaklarını sömüren botlar / crawler http://blog.wolkanca.com/sunucu-kaynaklarini-somuren-botlar-crawler/?source=rss http://blog.wolkanca.com/sunucu-kaynaklarini-somuren-botlar-crawler/#comments Sun, 09 Mar 2008 01:04:36 +0000 wolkanca http://blog.wolkanca.com/sunucu-kaynaklarini-somuren-botlar-crawler/ Daha önce kendi sunucusunda blog yazacak arkadaşlar için önerilerde bulunmuştum, kendi sunucunda bir WordPress blogu kurarak yazmak isteyen veya yazmayı sürdürenlerin bloglarının yazı, etiket, kategori vs. çoğaldıkça ve bunun yanında ziyaretçi trafiği yükseldikçe pişmiş tavuğun başına gelmeyenler onun başına gelebiildiğini bizzat yaşamış ve yazmıştım.
Buradaki blog maceramda 3 faklı hosting firması ile çalıştım, ilki Arif beyin [...]

Yazar: Wolkanca
© 2005 - 2008 Blog ve Wolkanca. All Rights Reserved.]]> Daha önce kendi sunucusunda yazacak arkadaşlar için önerilerde bulunmuştum, kendi sunucunda bir WordPress blogu kurarak yazmak isteyen veya yazmayı sürdürenlerin bloglarının yazı, etiket, kategori vs. çoğaldıkça ve bunun yanında ziyaretçi trafiği yükseldikçe pişmiş tavuğun başına gelmeyenler onun başına gelebiildiğini bizzat yaşamış ve yazmıştım.

Buradaki maceramda 3 faklı firması ile çalıştım, ilki Arif beyin Tescilet.net firması idi, bu firmada doğduk diyebilirim, ikincisi Dreamhost ve şu anda Seçkin Bey'in yönettiği Hostcin ile çalışıyoruz, mutluyuz.

Tecrübelerime dayanarak web sitelerinin kaynaklarını o siteye giriş yapan insanlardan çok (indeksleyici) yani arama veya her neyse o şey onlara ait 'lar sömürüyor diyebilirim.
Burada bu botları engellememiz tabiki mümkün diyebilirsiniz, fakat diğer taraftan , Yahoo, Msn gibi arama motorlarının botlarının veya sadece bloglar ve rss akışı olan siteler özel olan botları engeller isek bu sefer blogunuz oradan gelen ziyaretçilerden mahrum kalabilir. Engellemezseniz blogunuzun bulunduğu sunucunun tüm kaynakları bu botlar tarafından sömürülüp diğer okurlara ve hatta size blogsuz bir hayat kalabiliyor, ya firmanız size "koçum bu seni kesmez daha büyük bir kirala" diyecek veya direk sizin blogunuzu veya hesabınızı kapatacaktır, o da olmadı bir diğer ihtimal siz ve ziyaretçiler dakikalarca sayfanızın açılışını beklemek zorunda kalacaksınız, çok keyifsiz bir hal alacaktır yazmak.


Sunucu kaynaklarını sömüren botlar crawler

Tüm bunları yazmamdaki neden benim gibi bu problemlerle karşılaşacak arkadaşlara faydalı olmak, benim tavsiyem , Yahoo ve Msn harici diğer tüm arama motoru larını engellemeniz, sunucunuzda iyi bir araştırma yapın ve istatistiklerden blogunuza en çok bağlantı yapılan adreslerini kontrol edip o adreslerinin hangi firmaya veya hangi ülkeye ait olduklarını tespit edin. Örneğin adreslerini araştırdığımda bu bloga Türkiye'den çok ABD kaynaklı adreslerinin bağlandığını keşfedince çok şaşırmıştım, bu adresleri tahmin edeceğiniz gibi , vb. servislere ait idi.

Ben çok fazla robot engelledim bunların arasında en berbat olanı aşağıdaki, sizde sunucunuzda bir yavaşlık hissediyorsanız hemen istatistikleri konrol edebiliyorsanız edin veya hizmeti veren firmanıza bu konuda danışın;

Twiceler crawls from the following addresses:
38.99.13.121 38.99.44.101 64.1.215.166 208.36.144.6
38.99.13.122 38.99.44.102 64.1.215.162 208.36.144.7
38.99.13.123 38.99.44.103 64.1.215.163 208.36.144.8
38.99.13.124 38.99.44.104 64.1.215.164 208.36.144.9
38.99.13.125 38.99.44.105 64.1.215.165 208.36.144.10
38.99.13.126 38.99.44.106

Kısacası kendi sunucunuzda yazacaksanız eğer kaynaklarını lara, botlara ve kötü niyetli makinelere yedirmeyin, dikkatli olun ve her şeyi firmasına bırakmayın, çünkü onlar çalıştıkları diğer yüzlerce web sitesi gibi sizin blogunuzuda sıradan bir site gibi görecektir, pek fazla ilgilenmeyecektir, oysa sizin blogunuz size özel ve sizin için önemlidir.


© 2005 - 2008 wolkanca. Bu yazi http://blog.wolkanca.com/ adresine aittir, ..com sitesinin yazilari yalnizca izin alinmak kaydi ile alinti yapilabilir ve yayinlanabilir. Lutfen yapacaginiz alintilarda link verin ve izin alin bu ahlaki kurallara uygun olacaktir. Sitenin yazilarini izinsiz baska yerlerde yayinlayanlar 551 nolu fikir haklari yasasini ihlal ettigi ve bundan dolayi haklarinda kanuni islem yapilacagini bilmelidirler.

Etiket: , , , , , , , , , , , , , , , , ,

Bunu okuyan şunları da okur;

]]> http://blog.wolkanca.com/sunucu-kaynaklarini-somuren-botlar-crawler/feed/ iyi bayramlar http://blog.wolkanca.com/iyi-bayramlar/?source=rss http://blog.wolkanca.com/iyi-bayramlar/#comments Thu, 11 Oct 2007 22:26:40 +0000 wolkanca http://blog.wolkanca.com/iyi-bayramlar/ İşte geldim. Bu sefer gerçekten geldim, bir kaç post kayıp ile yeni sunucudayız. Tescilet.net çalışanlarına çok teşekkür ediyorum gerçekten de gecelerini gündüzlerine kattılar ve zorda olsa blog.wolkanca.com‘u hayata döndürdüler. Tabi bu hikaye biraz uzun elimde fotoğraflar var çok zorlu 2 gün geçirdik bayrama yetiştirdik, inanılmaz tecrübelerim oldu, özellikle Linux sunucu, böyle kocaman bir makinayı [...]

Yazar: Wolkanca
© 2005 - 2008 Blog ve Wolkanca. All Rights Reserved.]]> İşte . Bu sefer gerçekten , bir kaç post kayıp ile yeni sunucudayız. Tescilet.net çalışanlarına çok teşekkür ediyorum gerçekten de gecelerini gündüzlerine kattılar ve zorda olsa blog.wolkanca.com‘u hayata döndürdüler. Tabi bu hikaye biraz uzun elimde fotoğraflar var :) çok zorlu 2 gün geçirdik bayrama yetiştirdik, inanılmaz tecrübelerim oldu, özellikle Linux , böyle kocaman bir makinayı kullandım, kara ekran :) içinden veri tabanını aldım ama nasıl aldım gelinde bana sorun. Evimde 3 tane var ikisi kocaman bişi böle dozer gibi, off off. Neyse bilahire bir post yazacam bu konuda, iyi bayramlar alemi, benden kurtuluş yok, yine .


© 2005 - 2008 wolkanca. Bu yazi http://blog.wolkanca.com/ adresine aittir, ..com sitesinin yazilari yalnizca izin alinmak kaydi ile alinti yapilabilir ve yayinlanabilir. Lutfen yapacaginiz alintilarda link verin ve izin alin bu ahlaki kurallara uygun olacaktir. Sitenin yazilarini izinsiz baska yerlerde yayinlayanlar 551 nolu fikir haklari yasasini ihlal ettigi ve bundan dolayi haklarinda kanuni islem yapilacagini bilmelidirler.

Etiket: , , , , , , , , ,

Bunu okuyan şunları da okur;

]]> http://blog.wolkanca.com/iyi-bayramlar/feed/