# ab 24.5.06 fuer linkchecker alles erlauben User-agent: W3C-checklink Disallow: User-agent: yacybot Disallow: / # fuer alle anderen Agenten einige Verzeichnisse sperren # diese alphabetische Liste ist mit der # Sitemap-Konfiguration (dbs01, H.S.) abgestimmt # Stand: 16.6.2006 # Die Verzeichnisse conferences/bibliothekstagung und die webpac sind # verboten wegen MPG-Suche User-agent: * Disallow: /cc/ Disallow: /cgi-bin/ Disallow: /cluster2004/ Disallow: /computer/ Disallow: /conferences/mmbcp2000/pictures/ Disallow: /conferences_test/ Disallow: /conferences/bibliothekstagung/ Disallow: /desimone/ Disallow: /DeSimone Disallow: /edv/ Disallow: /ercom05/ Disallow: /images/ Disallow: /index_suche.html Disallow: /laptop.html Disallow: /library_alt/ Disallow: /library/inhaltUmschlag/ Disallow: /library/inhaltUmschlagExtern/ Disallow: /local_doc/ Disallow: /matheausstellung/ Disallow: /_mindterm.html Disallow: /mindterm Disallow: /ot/ Disallow: /pinboard/ Disallow: /private/ Disallow: /_sm/ Disallow: /scicomp/EXP_SUM/ Disallow: /ssi/ Disallow: /swsg/ Disallow: /tempc7/ Disallow: /tmp/ Disallow: /webmail/ Disallow: /webpac/ Disallow: /_webpac-1.2/ Disallow: /webpac-1.2/ Disallow: /zimmer/