# robots.txt for http://www.dpz.gwdg.de/clineu/robots.txt # Zugriff auf keine Seite erlauben, funktioniert eigentlich! Ignorieren aber Crawler User-agent: * Disallow: / # email Sammler draussenbleiben User-agent: EmailCollector Disallow: / # Robots die durchdrehen fliegen raus User-agent: GagaRobot Disallow: /