Bir Bilişim Terimi olan 'Örümcek' Arama motorları tarafından çokça kullanılan bu yazılımlar web sayfalarını almak ve içlerindeki metinleri okuyarak indekslemek için kullanılırlar. Örümcekler tüm sayfaları okumak ve indekslemek yerine site hakkında bilgi verecek olan belirli bir yüzdedeki sayfaları incelerler. Bu yüzde değeri için oldukça karmaşık algoritmalar kullanılırlar.