Robots.txt

Aus maxTechCorner

robots.txt – eine Datei im Webroot, die Suchmaschinen-Crawlern mitteilt, welche Bereiche sie besuchen dürfen.

Abgerufen von „http://techcorner.max-it.de/index.php?title=Robots.txt&oldid=3360“