Een '''''spider''''' (ook wel ''webcrawler'' genoemd) is een bot die het wereldwijde web op een methodische en geautomatiseerde manier doorbladert. ''Spiders'' maken veelal een lokale kopie van de gevonden pagina's om deze later te kunnen verwerken en indexeren voor bijvoorbeeld zoekmachines.