# =-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=
# ROBOTS.TXT
# Erstellung: 01.02.2007
# Modifiziert: 28.09.2007
# Author: sfluri(at)format-ag.ch
# Version: 2.0
# 
# Anfragen fuer Aenderungen
# Request for Updates
# http://www.format-ag.ch/de/kontakt
# =-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=

#
# Collectors & Spambots und alle anderen die wir nicht wollen!
# An die Betreiber: Bitte halten Sie sich an die robots.txt-Anweisungen!
#

User-agent: EmailCollector
  Disallow: /

User-agent: Java
  Disallow: /

#
# Bots die den gesamten Inhalt fuer Offlineverwendung kopieren.
# An die Betreiber: Bitte halten Sie sich an die robots.txt-Anweisungen!
#  

User-agent: sitecheck.internetseer.com
  Disallow: /

User-agent: Zealbot
  Disallow: /

User-agent: MSIECrawler
  Disallow: /

User-agent: SiteSnagger
  Disallow: /

User-agent: WebStripper
  Disallow: /

User-agent: WebCopier
  Disallow: /

User-agent: Fetch
  Disallow: /

User-agent: Offline Explorer
  Disallow: /

User-agent: Teleport
  Disallow: /

User-agent: TeleportPro
  Disallow: /

User-agent: WebZIP
  Disallow: /

User-agent: linko
  Disallow: /

User-agent: HTTrack
  Disallow: /

User-agent: Microsoft.URL.Control
  Disallow: /

User-agent: Xenu
  Disallow: /

User-agent: larbin
  Disallow: /

User-agent: libwww
  Disallow: /

User-agent: ZyBORG
  Disallow: /

User-agent: Download Ninja
  Disallow: /
	
User-agent: WebReaper
  Disallow: /

# 
# Inhalte die nicht indiziert werden duerfen
# An die Betreiber: Bitte halten Sie sich an die robots.txt-Anweisungen!
#

User-agent: *
  Disallow: /admin/
  Disallow: /auth/
  Disallow: /cgi-bin/
  Disallow: /cgi-php/
  Disallow: /de.bak/
  Disallow: /demo/
    Disallow: /de/img/
    Disallow: /de/admin/
    Disallow: /de/drucken/
    Disallow: /de/login/
    Disallow: /de/password/
    Disallow: /de/profil/
    Disallow: /de/registrierung/
    Disallow: /de/templates/
    Disallow: /de/wInstaller/
    Disallow: /de/wLayout/
      Disallow: /de/wLayout/format/
    Disallow: /de/wPrintpreview/
  Disallow: /error/
  Disallow: /function/
  Disallow: /login/
  Disallow: /shared/
  Disallow: /statistics/
  Disallow: /test/
  Disallow: /testlayout/
  Disallow: /weblication/

#
# Anweisung fuer Google
# An die Betreiber: Bitte halten Sie sich an die robots.txt-Anweisungen!
#

User-agent: Googlebot
  # Ordner und Unterordner auschliessen
  Disallow: /*/admin/
  Disallow: /*/documentXt/
  Disallow: /*/draftwTmp*/
  Disallow: /*/function/
  Disallow: /*/includes/
  Disallow: /*/list/
  Disallow: /*/master/
  Disallow: /*/scripts/
  Disallow: /*/styles/
  Disallow: /*/temp/
  Disallow: /*/templates/
  Disallow: /*/wConf/
  Disallow: /*/wData/
  Disallow: /*/wEdit*/
  Disallow: /*/wInstaller/
  Disallow: /*/wMails/
  # Dateitypen und Namen auschliessen
  Disallow: /*/wApplication.xml$
  Disallow: /*/wConf.xml$
  Disallow: /*/weblication.xml$
  Disallow: /*/wImages.xml$
  Disallow: /*/wMedia.xml$
  Disallow: /*.bak$
  Disallow: /*.eml$
  Disallow: /*.js$
  Disallow: /*.csv$
  Disallow: /*.css$
  Disallow: /*.tpl$
  Disallow: /*.wfb$
  Disallow: /*.wLocked$
	
User-agent: Googlebot
  Allow: /*?$
    Allow: /cgi-bin/wContentaccess.cgi?$
    Allow: /cgi-bin/wMobileview.cgi?$

#
# Anweisung fuer Microsoft
# An die Betreiber: Bitte halten Sie sich an die robots.txt-Anweisungen!
#	

User-Agent: msnbot
  # Dateitypen & Namen auschliessen
  Disallow: wApplication.xml$
  Disallow: wConf.xml$
  Disallow: weblication.xml$
  Disallow: wImages.xml$
  Disallow: wMedia.xml$
  Disallow: *.bak$
  Disallow: *.eml$
  Disallow: *.js$
  Disallow: *.css$
  Disallow: *.csv$
  Disallow: *.tpl$
  Disallow: *.wfb$
  Disallow: *.wLocked$
	
User-agent: msnbot
  Allow: /*?$
    Allow: /cgi-bin/wContentaccess.cgi?$
    Allow: /cgi-bin/wMobileview.cgi?$

# 
# Fuer Alle die wir hier wollen ;-)
# Bots und Spiders duerfen folgende Inhalte indizieren
# 

User-agent: *
  Allow: /cgi-bin/wContentaccess.cgi/
  Allow: /cgi-bin/wMobileview.cgi/
  Allow: /de/
    Allow: /de/sitemap/index.php   
    Allow: /de/standard.wNavigation.xml
  Allow: /favicon.php
	Allow: /rss.news.php
  Allow: /google.sitemap.php
  Allow: /google.sitemap.php?wai=1
  Allow: /index.php
  Allow: /index_right.php
  Allow: /info.txt
  Allow: /robots.txt