# robots.txt for http://www.beispiel.de/ # Zugriff auf alle Dateien erlauben # aber nicht auf die Vergangenheit User-agent: ia_archiver Disallow: /