Интересна тема е така нареченият капан за паяци! Ако решите да правите такъв капан за паяци, трябва да ограничите достъпа на Google и другите търсещи машини чрез robots.txt. Спам ботовете, които не се съобразяват с ограниченията в robots.txt, ще попаднат в капана. Spider trap или  капан за паяци всъщност е наличието на множество уебстраници, които могат да принудят както целенасочено, Continue Reading »