# =============================================================================
# robots.txt für IMC Krems – https://www.imc.ac.at
# Hochschule für Angewandte Wissenschaften
# =============================================================================
# -----------------------------------------------------------------------------
# Standard-Crawler (alle Bots)
# -----------------------------------------------------------------------------
User-agent: *
Allow: /
Allow: /fileadmin/*
Allow: /fileadmin/templates/*/Public/*
Allow: /typo3conf/ext/*/Public/*
# Statische Assets erlauben (CSS, JS, Bilder)
Allow: /typo3temp/*.css$
Allow: /typo3temp/*.css.*.gzip$
Allow: /typo3temp/*.js$
Allow: /typo3temp/*.js.*.gzip$
Allow: /typo3temp/*.jpg$
Allow: /typo3temp/*.gif$
Allow: /typo3temp/*.png$
Allow: /typo3temp/*.svg$
Allow: /typo3/*.css$
Allow: /typo3/*.css.*.gzip$
Allow: /typo3/*.js$
Allow: /typo3/*.js.*.gzip$
Allow: /typo3/*.jpg$
Allow: /typo3/*.gif$
Allow: /typo3/*.png$
Allow: /typo3/*.svg$
# Nur URLs mit sauberen Routen indexieren (keine ID-basierten Parameter)
Disallow: /*?id=*
Disallow: /*&id=*
# Standardsprache (L=0) ist bereits über pretty URLs erreichbar
Disallow: /*?L=0*
Disallow: /*&L=0*
# Interne Systempfade
Disallow: /*/Private/*
Disallow: /*/Configuration/*
Disallow: /fileadmin/templates/*
Disallow: /typo3*
# Print-Versionen und interne Type-Parameter
Disallow: /*?type=98*
Disallow: /*&type=98*
Disallow: /*?type=201*
# Cache-Hash und Powermail-Sessions
Disallow: *?cHash*
Disallow: *?tx_powermail_pi1*
# Vergleichs-/Ajax-Endpoints
Disallow: *nc/ajax-comparison/*
Disallow: *___COUNTRY___*
# Datenbank-Dumps grundsätzlich sperren
Disallow: *.sql
Disallow: *.sql.gz
# =============================================================================
# KI-CRAWLER (AI Search & LLM Training)
# Wir erlauben ausdrücklich die Nutzung durch KI-Systeme,
# um in generativen Suchergebnissen sichtbar zu sein.
# =============================================================================
# --- OpenAI (ChatGPT, GPT-4/5, SearchGPT) ---
User-agent: GPTBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: OAI-SearchBot
Allow: /
# --- Google AI (Gemini, AI Overviews) ---
User-agent: Google-Extended
Allow: /
# --- Anthropic (Claude) ---
User-agent: anthropic-ai
Allow: /
User-agent: Claude-Web
Allow: /
User-agent: ClaudeBot
Allow: /
# --- Perplexity AI ---
User-agent: PerplexityBot
Allow: /
User-agent: Perplexity-User
Allow: /
# --- Microsoft Bing / Copilot ---
User-agent: Bingbot
Allow: /
# --- Meta AI (Llama, WhatsApp AI) ---
User-agent: FacebookBot
Allow: /
User-agent: Meta-ExternalAgent
Allow: /
# --- Apple Intelligence ---
User-agent: Applebot-Extended
Allow: /
# --- Amazon (Alexa, Q, Nova) ---
User-agent: Amazonbot
Allow: /
# --- Common Crawl (Trainingsdaten für viele Modelle) ---
User-agent: CCBot
Allow: /
# --- Weitere KI-Crawler ---
User-agent: cohere-ai
Allow: /
User-agent: Omgilibot
Allow: /
User-agent: Diffbot
Allow: /
User-agent: YouBot
Allow: /
User-agent: AI2Bot
Allow: /
User-agent: DuckAssistBot
Allow: /
# --- Yandex ---
User-agent: YandexBot
Allow: /
# =============================================================================
# SITEMAPS & LLM-HINWEIS
# =============================================================================
Sitemap: https://www.imc.ac.at/sitemap.xml
Sitemap: https://www.imc.ac.at/en/sitemap.xml
# Hinweis für KI-Agenten: strukturierte Übersicht der Website
# gemäß llmstxt.org-Standard verfügbar unter:
# https://www.imc.ac.at/llms.txt
Hauptnavigation