^{وظيفته التغلغل بداخل موقعك وفهرسة الكلمات الموجودة فيه بحيث يظهر موقعك في نتائج البحث في جوجل اذا توفرت فيه الكلمة
وتقوم مواقع محراكات البحث وبواسطة برنامج يسمى العنكبوت spider بتجميع قوائم بالكلمات الموجودة على الشبكة وتسمى
هذه العملية web crawling وبذلك فعندما تبحث عن كلمة معينة فأنها تبحث عنها في تلك القوائم المعدة من قبل العنكبوت}

_{^{تقوم اولا هذه العناكب spiders بزيارة السيرفرات التي تتمتع بعدد كبير من الزيارات ( عليها ضغط ) والمواقع المشهورة ثم يقوم بتفصيل الكلمات في هذا الموقع وبزيارة جميع الوصلات في تلك المواقع , وبذلك يكون العنكبوت قد زار اشهر واكبر  المواقع وجميع الوصلات الموجودة بها وقام بتصنيف شامل لجميع الكلمات الموجودة بها وهذه الطريقة متبعه في موقع google الشهير وبحسبة بسيطه اذا علمنا ان كل عنكبوت يستطيع 25 صفحة بالثانية}}

_{^{بذلك اذا قمنا بتشغيل 4 عناكب فاننا نحصل على 100 صفحة بالثانية والتي ينتج عنها حوالي 600 كيلو بايت في الثانية}}

_{^{وبذلك يمكننا ان نتصور الكم الهائل من المعلومات يتم تجميعه في الثانية الواحده بالنسبة لموقع مثل google}}