RankActive LinkBot
Wat doet RankActive LinkBot precies op mijn website?
RankActive LinkBot is ontwikkeld om alle informatie op internet te analyseren. Wij verzamelen informatie over populaire content op het internet, gegevens over backlinks en andere technische informatie. Iedere dag analyseren we miljarden pagina's op meer dan 40 parameters. Alle informatie wordt bewaard op onze beveiligde servers.
Als je merkt dat onze crawler je website bezoekt, maar je wilt dat niet, dan kun je dat aangeven in je robots.txt file.
Hoe kan ik RankActive LinkBot blokkeren?
Je kunt dit opnemen in je robots.txt file door het volgende toe te voegen:
User-agent: RankActiveLinkBot
Disallow: /
Je kunt ook de frequentie wijzigen waarmee je site wordt gescand.
Gebruik hiervoor de directive Crawl-Delay:
User-agent: RankActiveLinkBot
Crawl-Delay: 5
Wat is robots.txt?
Meer informatie over de robots.txt file vind je hier: http://www.robotstxt.org/
Waarom heeft de ROBOTS.TXT BLOCK het scannen van mijn website niet gestopt?
Het kan tot 3 dagen duren voordat de robots.txt opnieuw geïndexeerd is. Als je wilt dat het scannen direct stopt, stuur ons dan een email: support@rankactive.com