ترسل برمجيات تسمى العناكب تقوم العناكب بقرائة الصفحات وارشفتها والبحث عن روابط بداخلها لتزحف مرة اخرى للروابط هذه وتستمر بهذه العملية حتى تقوم بارشفة المحتوى دون توقف