# ==========================================
# NOHRD MCP Server - robots.txt
# Erlaubt Indexierung durch Suchmaschinen
# und KI-Crawler für strukturierte Produktdaten
# ==========================================

User-agent: *
Allow: /

# ===========================
# KI- und Suchmaschinenzugriff
# ===========================

# KI-Crawler
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: CCBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Amazonbot
Allow: /

# Klassische Web-Crawler
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

# ===========================
# Hinweise für KI-Crawler
# ===========================

# Diese Domain liefert strukturierte NOHRD Produktdaten
# über das Model Context Protocol (MCP).
# Beispiel-Endpunkte:
#   https://mcp.nohrd.com/mcp/nohrd
#   https://mcp.nohrd.com/.well-known/ai-plugin.json

# ===========================
# Index-Hinweise
# ===========================
Sitemap: https://mcp.nohrd.com/sitemap.xml

# AI Plugin Manifest (Hinweis für KI-Systeme)
AI-plugin: https://mcp.nohrd.com/.well-known/ai-plugin.json