# robots.txt fuer http://www.dr-gabriele-pohl.de/ # # Domain zum spidern freigeben, Spezialverzeichnisse ausschliessen User-agent: * Disallow: /content-Dateien/ Disallow: /test/ Disallow: /webEdition/ User-agent: Googlebot Disallow: /content-Dateien/ Disallow: /test/ Disallow: /webEdition/ # Lexikon Kategorien spiedern, aber nicht indexieren Noindex: /lexikon/kategorie/*/index.html User-agent: Browsershots Disallow: Sitemap: http://www.dr-gabriele-pohl.de/sitemap.xml Sitemap: http://www.dr-gabriele-pohl.de/lexikon/google_sitemap/sitemap.xml