İçerik
- Tanımı - Örümcek ne demektir?
- Microsoft Azure ve Microsoft Cloud'a Giriş | Bu kılavuz boyunca, bulut bilişimin neyle ilgili olduğunu ve Microsoft Azure'un işinizi buluttan geçirmenize ve yürütmenize nasıl yardımcı olabileceğini öğreneceksiniz.
- Techopedia örümcek açıklar
Tanımı - Örümcek ne demektir?
İnternet'te, örümcek, kullanıcı arama sorguları için arama sonuçları sağlamak amacıyla genellikle Web sayfalarını endekslemek amacıyla sistematik olarak gezinmek ve Web’de gezinmek için tasarlanmış özel bir yazılımdır. Bu tür örümceklerin en ünlüsü, arama sonuçlarında alakalı sonuçların alınmasını sağlamaya yardımcı olan Googlebot, Googles'ın ana tarayıcısıdır.
Örümcekler ayrıca Web tarayıcıları, arama botları veya basitçe botlar olarak da bilinir.
Microsoft Azure ve Microsoft Cloud'a Giriş | Bu kılavuz boyunca, bulut bilişimin neyle ilgili olduğunu ve Microsoft Azure'un işinizi buluttan geçirmenize ve yürütmenize nasıl yardımcı olabileceğini öğreneceksiniz.
Techopedia örümcek açıklar
Bir örümcek temelde World Wide Web'den bilgi toplamak için kullanılan bir programdır. Genelde arama motoru sonuçları için bilgi toplayan ve daha sonra kullanmak üzere dizine ekleyen web sitelerinin sayfalarında gezinir. Örümcek web sayfalarını ve sayfalarını sayfalara ve sayfalardan gelen çeşitli bağlantılarla ziyaret eder, bu nedenle tek bir bağlantıya sahip olmayan bir sayfayı indekslemek zor olacaktır ve arama sonuçları sayfasında gerçekten düşük sıralanabilir. Bir sayfaya işaret eden çok sayıda bağlantı varsa, bu, sayfanın popüler olduğu ve arama sonuçlarında daha yüksek görüneceği anlamına gelir.
Web taramasına katılan adımlar:
- Örümcek bir site bulur ve sayfalarını taramaya başlar.
- Örümcek sitenin sözcüklerini ve içeriğini indeksler.
- Örümcek sitede bulunan bağlantıları ziyaret eder.
Örümcekler veya web tarayıcıları yalnızca programlardır ve bu nedenle programcılar tarafından belirlenen sistematik kuralları izlerler. Web sitelerinin sahipleri de örümceklere, sitenin hangi bölümlerinin endeksleneceğini ve hangilerinin olmamasını söyleyerek anlatabilir. Bu, örümceğin hangi dizine endeksleyeceği ve hangi linklerin takip edeceği ve hangilerinin yoksayması gerektiği ile ilgili talimatları içeren bir "robots.txt" dosyası oluşturarak yapılır. En önemli örümcekler, Google, Bing ve Yahoo gibi büyük arama motorlarına ve veri madenciliği ve araştırmalarına yönelik olanlardır, ancak kullanıcının reklama satmak için s bulması ve toplaması için yazılan bazı kötü niyetli örümcekler de vardır. şirketleri veya Web güvenliğindeki güvenlik açıklarını bulmak için.