عنكبوت محركات البحث

وظيفته التغلغل بداخل موقعك وفهرسة الكلمات الموجودة فيه

بحيث يظهر موقعك في نتائج البحث في جوجل اذا توفرت فيه الكلمة

تقوم مواقع محراكات البحث وبواسطة برنامج يسمى العنكبوت spider بتجميع قوائم بالكلمات الموجودة على الشبكة وتسمى هذه العملية web crawling

وبذلك فعندما تبحث عن كلمة معينة فأنها تبحث عنها في تلك القوائم المعدة من قبل العنكبوت

طريقة عمل هذا العنكبوت :

تقوم اولا هذه العناكب spiders بزيارة السيرفرات التي تتمتع بعدد كبير من الزيارات ( عليها ضغط ) والمواقع المشهورة

ثم يقوم بتفصيل الكلمات في هذا الموقع وبزيارة جميع الوصلات في تلك المواقع , وبذلك يكون العنكبوت قد زار اشهر واكبر المواقع وجميع الوصلات الموجودة بها وقام بتصنيف شامل لجميع الكلمات الموجودة بها

وهذه الطريقة متبعه من قل موقع GOOGLE الشهير

وبحسبة بسيطه اذا علمنا ان كل عنكبوت يستطيع 25 صفحة بالثانية

بذلك اذا قمنا بتشغيل 4 عناكب فاننا نحصل على 100 صفحة بالثانية والتي ينتج عنها حوالي 600 كيلو بايت في الثانية

وبذلك يمكننا ان نتصور الكم الهائل من المعلومات يتم تجميعه في الثانية الواحده