En gruppe forskere fra University of California, Santa Barbara og Northeastern University har lavet et system til at opdage og blokere ondsindede webcrawlere, som de kalder PUBCRAWL (Protecting Users and Businesses from CRAWLers). Systemet er i stand til med meget stor nøjagtighed at kende forskel på legitime brugere, selvom de er skjult bag en enkelt proxy og en ondsindet webcrawler-kampagne, som er distribueret ud til at komme fra flere forskellige adresser….