# robots.txt # # siehe # http://de.selfhtml.org/diverses/clients.htm#robots_agenten # bzw. # http://www.siteware.ch/webresources/useragents/db.html User-agent: * Disallow: /extern/ User-agent: * Disallow: Allow: