وب به عنوان بستر فعاليت موتورهاي جستجو، ساختاري نموداري دارد. اين ساختار حرکت خزنده ها در موتورهاي جستجو را به روشهايي منطبق بر خود محدود مي سازد. مقاله حاضر، به بررسي تاثير ساختار وب بر چگونگي حرکت خزنده ها و فعاليت نمايه سازها در موتورهاي جستجو مي پردازد. پس از بحثي مقدماتي در باب نمودارهاي جهت دار و فرايند کار خزنده، عمده ترين روشهاي حرکت خزنده در سطح وب شامل حرکت «عمق ـ شروع»، «توزيع ـ شروع» و «بهترين ـ شروع» مطرح شده و سپس واحد سازه يابي و چگونگي تشکيل درختهاي سازه يابي از قالب HTML مورد بررسي قرار خواهد گرفت.