Inhoudsopgave:
Definitie - Wat betekent Spider Trap?
Een spider trap is een online functie die een webcrawler of bot in een oneindige lus of een andere recursieve situatie opsluit die zijn middelen in beslag neemt en die crawler in wezen verbindt voor een specifieke set iteraties.
Een spinval wordt ook wel een rupsenval genoemd.
Techopedia legt Spider Trap uit
Sommige spider traps zijn gemaakt om opzettelijk de aandacht van webcrawlers af te leiden. Iemand kan bijvoorbeeld een diepe mapstructuur programmeren zodat de webcrawler in die structuur naar beneden kruipt in plaats van naar andere delen van een site of online ruimte te gaan. Programmeurs kunnen ook de lexicale analysator van de crawler overbelasten of een sessie met cookies laden om de bronnen van spambots of andere crawlers te ontladen.
Andere spider vallen worden onbedoeld gemaakt door programmeerfouten. Sommige soorten kalenderreferenties kunnen schijnbaar oneindige lussen veroorzaken en slecht gemaakte crawlers laten crashen.
Het gebruik van spider traps en andere ontwerpen om robotachtige webcrawlers te verijdelen, zal veranderen met de opkomst van nieuwe principes voor machinaal leren en kunstmatige intelligentie. Omdat ontwerpers hebben bewezen dat ze nu webcrawlers kunnen maken die op commando's op de pagina kunnen reageren op dezelfde manier als mensen, zullen middelen als CAPTCHA niet langer effectief zijn tegen robotgebruikers. Spider vallen en crawler vallen waarschijnlijk ook niet, omdat de partijen die de crawlers of bots gebruiken ze zullen investeren met de mogelijkheid om deze vallen te herkennen en te vermijden.
