Der Sitedomain-Bot ist Bestandteil der Suche nach aktiven Domains.
Dabei wird nach links auf andere .de Domains gesucht, die noch nicht in der Datenbank sind.
Was muss ich tun, wenn ich nicht will, dass meine Domain gescannt wird?
Einfach folgendes in die robots.txt aufnehemn:
User-agent: Sitedomain-Bot
Disallow: /
Schreibe einen Kommentar
Du musst angemeldet sein, um einen Kommentar abzugeben.