# robots.txt für die Webseite www.therapie-holzhauer.de # Diese Datei verbietet den Zugriff auf einzelne Verzeichnis, auch abhängig vom jeweiligen Suchroboter (Bot) # Wenn die Datei nicht existiert wird alles freigegeben, allerdings ist es von Vorteil, dies explizit # durch diese Datei freizugeben. Die Datei muss als robots.txt im root-Verzeichnis installiert werden. # Welcher Suchmaschinenbot berücksichtigt wird, wird mir "User-agent" eingestellt # Hier die Namensgebungen der verschiedenen Bots: # * = Alle # Googlebot = Google # Google-Image = Spezieller Bot für die Google-Bilderdatenbank # Lycos = Lycos # Slurp = Hotbot # MSNbot = MSN Suche # Scooter = AltaVista # KIT-Fireball = Fireball # Was nicht zum Crawlen erlaubt werden soll, erfolgt mit Angabe des Verzeichnisses # Ohne eine Angabe: Alles freigegeben # / = root # /images = Verzeichnis Images # Alle Bots und alle Verzeichnisse erlauben (sollte Standardeintrag sein) User-agent: * Disallow: