Scrapers goed of slecht voor je site?

[glompie]

Als ik naar mijn eigen domeinen kijk vind het nogal de spuigaten uit lopen met scrapers en aanverwante crawlende sites.
Dit is wel een aardig voorbeeld: nl . saferpage . com
Hoe kun je voorkomen dat je site door zoiets gecrawld wordt? En heeft het een positief of negatief SEO effect op je eigen site?

[Rbunskoeke]

Het zou naar mijn mening geen negatieve invloed hebben op SEO. Zorg wel dat je automatisch de zoekmachines pingt of jouw berichten deelt op social media, zodat jouw nieuwe webpagina eerder wordt geïndexeerd dan die op scraperwebsites. Het kan mogelijk een (licht) voordeel hebben (als het gescrapt wordt door relevante websites).

[glompie]

Bij mij gaat het meestal niet om gerelateerde sites. Het zijn vooral sites die statistieken tonen.
Bij nader inzien vind ik het zelf een nadeel. Dus los van of je seo er onder lijd of niet zou ik het ze toch zo moeilijk mogelijk willen maken. Een robots.txt helpt niet want die negeren ze gewoon. En verder ken ik alleen de .htaccess manier.

order allow,deny
deny from blabla.com
allow from all

Alleen moet je ze dan allemaal gaan opnoemen. Weet er iemand een beter manier om ze tegen te houden?

[Auteur]

Berichten