עכביש
צורת עבודתו של העכביש הנקרא גם רובוט היא לעבור באופן שיטתי על המידע,מכתובת לכתובת.
המעבר עצמו נעשה ע"י הקישורים הנמצאים בין אתר לאתר.
ובצורה זו מקטלגים את הכתובות של האתרים.
העכביש, הרובוט עוברים באופן מקביל ברשת,ז"א תוך כדי בדיקת המידע שבדף עצמו הוא מוצא את הקישורים לאתרים האחרים.
מעבר על הדף עצמו דרשו לאינדוקס(יוסבר בפירוט בהמשך) והקישורים כדי להמשיך בחיפוש.
המטרה העיקרית בשליחת העכביש,רובוט הוא כדי לאפשר אינדקס עדכני ככל האפשר.
בכל זמן נתון.
העכביש,רובוט נקרא גם בשם זוחל או סוכנים של מנועי החיפוש.
דרישות החיפוש של משתמש הקצה מופנות לאינדקס,ולא אל הרשת עצמה.