Spider Trap

Eine Spider Trap (Übersetzung: Spider-Falle) ist eine Web-Struktur, die unerwünschte Spider/Robots an der Erfassung der Inhalte einer Website hindern soll. Ziel ist es, unerwünschte Spider, die Daten sammeln oder Sicherheitslücken ausfindig machen sollen, von der Erfassung eines Internetinhalts auszuschließen, während erwünschte Crawler, wie die Bots von Suchmaschinen, in ihrer Arbeit nicht beeinträchtigt werden sollen.