Een spider is een geautomatiseerde software waarmee de pagina’s op een website worden doorzocht. Een spider is dus een soort bot die automatisch iedere regel van de Inhalt op een website controleert en de dofollow hyperlinks naar een andere pagina volgt.
Via spiders worden nieuwe pagina’s en gewijzigde Inhalt geïndexeerd, zodat deze vindbaar zijn in de Suchergebnisse van een Suchmaschine. Daarom is het hebben van een heldere interne linkstructuur und ein sitemap van groot belang bij Suchmaschinenoptimierung.
De termen spiders de Krabbeltiere worden vaak door elkaar gebruikt. Toch zit er wel degelijk een verschil in. Een spider wordt namelijk gebruikt voor het doorzoeken van een website, terwijl een crawler wordt gebruikt voor het doorzoeken van gehele zoekmachines.
Ein sorgfältig zusammengestellter Leitfaden mit den wesentlichen Aufmerksamkeitsbereichen und bewährten Schritten für maximale Wirkung.