Toplam 2 adet sonuctan sayfa basi 1 ile 2 arasi kadar sonuc gösteriliyor
-
30.Aralık.2014, 13:10 #1
Google Web Crawler Nedir?
Google web crawler arama motorları tarafından internetteki bilgileri tarayıp kendi belirledikleri kurallara göre dizinlerine kaydetmek amacı ile kullanılan yazılımlardır. Web Crawler yazılımları sadece siteleri arama motorları sonuçlarında listelemek haricinde, resim, video, makale, dosya, müzik vb gibi bir çok farklı format ve yapıdaki bilgiyi tarayıp farklı dizinler altında toplamaktadır. Yani bililenin aksine Google ve Bing haricinde aktif ve etkili bir çok farklı bot internetteki bilgileri düzenlemekle uğraşmaktadır.
Yine aynı şekilde genel olarak aynı amaca hizmet etmesinin yanında içerdiği algoritmik farklılıkları ile arama motorlarının kullandığı farklı robot yazılımlar vardır. Web robot, web spider veya bot olarak ta adlandırılan arama motorları robotları olan bu bilgisayar yazılımları websitelerini dolaşarak gerekli bilgileri toplarlar. Bu içeriği toplarken sitenin alan adından, içeriğine, link yapısı ve site haritasına kadar bir çok farklı noktayı göz önünde bulundururlar, elbette sitenin indekslenmesi gereken alanları için robots.txt dosyasındaki yönlendirmeleri dikkate alırlar.
Başlıca Bilinen Arama Motoru Robotları
Googlebot, Googlebot-Image, Googlebot-Mobile, Googlebot-Video, Adsbot-Google, Mediapartners-Google, Könguló (Google)
BingBot/MSNBot, MSRBot (Bing)
YandexBot (Yandex)
Baiduspider, Baiduspider-image, Baiduspider-ads (Baidu)
FAST Crawler (Fast Search & Transfer – Alltheweb)
Scooter, Mercator (Altavista)
Slurp, Yahoo-Blogs (Yahoo)
Gigabot (Gigablast)
Scrubby (Scrub The Web)
Robozilla (DMOZ)
Twiceler (Cuil)
-
Eline sağlık optimusprime arkadaş. Bahsedilen botların çoğu sitemizde konaklıyor uzun zamandır.
Konu Bilgileri
Bu Konuya Gözatan Kullanıcılar
Şu anda 1 kullanıcı bu konuyu görüntülüyor. (0 kayıtlı ve 1 misafir)
Benzer Konular
-
Google Pagerank Nedir ?
Konu Sahibi WeBMasteR Forum Pagerank/TrustrankCevap: 0Son Mesaj : 18.Kasım.2014, 17:00 -
Google Penguen Nedir?
Konu Sahibi WeBMasteR Forum GoogleCevap: 0Son Mesaj : 28.Temmuz.2014, 00:31 -
Google Caffeine Nedir ?
Konu Sahibi WeBMasteR Forum GoogleCevap: 0Son Mesaj : 28.Temmuz.2014, 00:08 -
Google Adwords Nedir? (Google'un Kendi Anlatımıyla)
Konu Sahibi WeBMasteR Forum AdsenseCevap: 0Son Mesaj : 24.Mayıs.2014, 20:21 -
Google Analytics nedir ?
Konu Sahibi WeBMasteR Forum SeoCevap: 0Son Mesaj : 21.Mayıs.2014, 22:00
Shopsocks5.com - Service Socks5...
Dün, 05:31 in Güncel Proxy Adresleri