Tüm arama motorları spider ismi verilen mini programlar ile siteleri tararlar ve içeriklerini kontrol ederler. Spiderlar farklı zaman aralıkları ile siteleri ziyaret ederler ve içeriklerini incelerler. Arama motoruna kayıt edilmiş bir site spider programlarını kendi sitesinin incelenmesi için çağırmış kabul edilir.
Bu işlem, arama motorunun site içeriğini kaydetmesini sağlar. Her arama motoru kendi spiderı ile arama yaparak sitenin sayfa içeriklerini kendi veritabanlarına kopyalar. Bunun sonucunda; o arma motorunda arama yapıldığı zaman; arama yapılan kelime ile direkt örtüşen sitelerin listesi sonuç sayfasında sıralanır.
Spiderlar özellikle sitelerin başlık ve açıklamalarını inceler ve ona göre bir sıralama oluşturur. Ayrıca birçok arama motoru sitesinin kendisine özel kriterleri bulunur. Eğer siteniz o arama motoruna özel kriterleri yerine getirmişse sonuç sayfasında ilk sıralarda yer alabilir. Arama Motoru Optimizasyonu çalışmasının temelinde de; arama motorlarının kriterlerine uygun düzenlenmiş bir site oluşturmak yatar.
