# robots.txt der IKAMED Institute AG # # Aufgebaut nach RFC 9309. Zwei Punkte, die dabei entscheidend sind: # * Jede Regel gehoert in eine Gruppe. Eine Zeile vor der ersten # User-agent-Zeile ist unwirksam (Abschnitt 2.2). # * Die Sitemap-Zeile braucht eine absolute URL (Abschnitt 2.2.3). # # Ein Crawler folgt GENAU EINER Gruppe -- der mit dem genauesten Treffer # auf seinen Namen. Eine eigene Gruppe erbt deshalb NICHTS von "*". # Darum ist die Sperrliste unten in beiden Gruppen vollstaendig und # WORTGLEICH. Wer eine Zeile aendert, muss sie in BEIDEN Gruppen aendern. # ===== KI-Antwortsysteme: ausdruecklich erlaubt ===== # User-agent: GPTBot # OpenAI, Trainings- und Antwortkorpus User-agent: OAI-SearchBot # OpenAI, Suchindex fuer ChatGPT-Antworten User-agent: ChatGPT-User # OpenAI, Abruf auf Nutzerwunsch User-agent: ClaudeBot # Anthropic User-agent: Claude-Web # Anthropic, Abruf auf Nutzerwunsch User-agent: Claude-SearchBot # Anthropic, Suchindex User-agent: PerplexityBot # Perplexity User-agent: Perplexity-User # Perplexity, Abruf auf Nutzerwunsch User-agent: Google-Extended # Google, Gemini und AI Overviews User-agent: Applebot-Extended # Apple Intelligence User-agent: meta-externalagent # Meta AI User-agent: cohere-ai # Cohere User-agent: YouBot # You.com Allow: / # Backend und interne Verzeichnisse Disallow: /typo3/ Disallow: /typo3temp/* Disallow: /typo3conf/* Disallow: /*/Private/* Disallow: /*/Configuration/* # Transaktionale und personenbezogene Bereiche Disallow: /warenkorb Disallow: /kundenbereich # Interne Suche und technische Seiten Disallow: /suchfunktion Disallow: /laufschrift-startseite # Zustands- und Darstellungsparameter. Sie zeigen denselben Inhalt # wie die saubere Adresse und wuerden den Crawl aufblaehen. Disallow: /*?id=* Disallow: /*&id=* Disallow: /*?L=* Disallow: /*&L=* Disallow: /*?Contrast=* Disallow: /*&Contrast=* Disallow: /*?Fsize=* Disallow: /*&Fsize=* Disallow: /*?size=* Disallow: /*&size=* Disallow: /*?dark-mode=* Disallow: /*&dark-mode=* Disallow: /*?cHash=* Disallow: /*&cHash=* Disallow: /*?type=98* Disallow: /*&type=98* Disallow: /*tx_form_formframework* # Blaetter-, Sortier- und Filterzustaende von KuferWEB. # Dieselben Parameter stehen als noindex in 0000010_page.typoscript -- # hier wird zusaetzlich der Crawl gespart. Disallow: /*?browse=* Disallow: /*&browse=* Disallow: /*?orderby=* Disallow: /*&orderby=* Disallow: /*?orderbyasc=* Disallow: /*&orderbyasc=* Disallow: /*?clearallkatfilter=* Disallow: /*&clearallkatfilter=* Disallow: /*?kathaupt=* Disallow: /*&kathaupt=* # Dateitypen Disallow: /*/*.sql Disallow: /*/*.sql.gz # Crawl-delay ist nicht Teil von RFC 9309. Google ignoriert die Zeile, # Bing und Yandex werten sie aus. Sie steht INNERHALB der Gruppe -- # ausserhalb waere sie unwirksam. Crawl-delay: 5 # ===== Amazonbot: gesperrt ===== # # Diese Sperre stand bereits in der bisherigen robots.txt und bleibt # unveraendert. Sie ist eine Entscheidung des Betreibers, keine # Fehlkonfiguration -- Amazonbot speist Alexa und Rufus. Wer die # Sichtbarkeit dort will, entfernt diese Gruppe. User-agent: Amazonbot Disallow: / # ===== Alle uebrigen ===== # User-agent: * Allow: / # Backend und interne Verzeichnisse Disallow: /typo3/ Disallow: /typo3temp/* Disallow: /typo3conf/* Disallow: /*/Private/* Disallow: /*/Configuration/* # Transaktionale und personenbezogene Bereiche Disallow: /warenkorb Disallow: /kundenbereich # Interne Suche und technische Seiten Disallow: /suchfunktion Disallow: /laufschrift-startseite # Zustands- und Darstellungsparameter. Sie zeigen denselben Inhalt # wie die saubere Adresse und wuerden den Crawl aufblaehen. Disallow: /*?id=* Disallow: /*&id=* Disallow: /*?L=* Disallow: /*&L=* Disallow: /*?Contrast=* Disallow: /*&Contrast=* Disallow: /*?Fsize=* Disallow: /*&Fsize=* Disallow: /*?size=* Disallow: /*&size=* Disallow: /*?dark-mode=* Disallow: /*&dark-mode=* Disallow: /*?cHash=* Disallow: /*&cHash=* Disallow: /*?type=98* Disallow: /*&type=98* Disallow: /*tx_form_formframework* # Blaetter-, Sortier- und Filterzustaende von KuferWEB. # Dieselben Parameter stehen als noindex in 0000010_page.typoscript -- # hier wird zusaetzlich der Crawl gespart. Disallow: /*?browse=* Disallow: /*&browse=* Disallow: /*?orderby=* Disallow: /*&orderby=* Disallow: /*?orderbyasc=* Disallow: /*&orderbyasc=* Disallow: /*?clearallkatfilter=* Disallow: /*&clearallkatfilter=* Disallow: /*?kathaupt=* Disallow: /*&kathaupt=* # Dateitypen Disallow: /*/*.sql Disallow: /*/*.sql.gz # Crawl-delay ist nicht Teil von RFC 9309. Google ignoriert die Zeile, # Bing und Yandex werten sie aus. Sie steht INNERHALB der Gruppe -- # ausserhalb waere sie unwirksam. Crawl-delay: 5 # Der Verweis zeigt auf den Sitemap-INDEX. Der nennt die einzelnen # Sitemaps (Seiten und Kurse) -- kommt eine dazu, ist hier nichts zu tun. Sitemap: https://www.ikamed.ch/sitemap.xml