# EnergieausweisApp.de — Such- und KI-Crawler ausdruecklich erlaubt
# Stand: 4.9.2026 (KI-Crawler einzeln benannt, Transaktionspfade gesperrt)
#
# Warum einzeln benannt, obwohl "User-agent: *" technisch reicht:
# Manche Betreiber werten eine ausdrueckliche Zeile als Zustimmungssignal und
# behandeln fehlende Eintraege konservativ. Die Zeilen kosten nichts und nehmen
# die Frage vorweg. Beobachtet am Wettbewerber heimpass.de (04.09.2026).

# ── Antwortmaschinen / KI ─────────────────────────────────────────────
User-agent: GPTBot
Allow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: anthropic-ai
Allow: /

User-agent: Claude-Web
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: Amazonbot
Allow: /

User-agent: Bytespider
Allow: /

User-agent: CCBot
Allow: /

User-agent: cohere-ai
Allow: /

User-agent: meta-externalagent
Allow: /

User-agent: MistralAI-User
Allow: /

# ── Klassische Suchmaschinen ──────────────────────────────────────────
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Applebot
Allow: /

User-agent: DuckDuckBot
Allow: /

# ── Alle uebrigen ─────────────────────────────────────────────────────
User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/
Disallow: /_/
# Transaktions- und Kontopfade: kein Inhalt, der in einer Antwort auftauchen soll
Disallow: /checkout
Disallow: /payment/
Disallow: /korrektur/
Disallow: /magic-login
Disallow: /dev-login
Disallow: /makler/portal
Disallow: /makler/kundenliste
Disallow: /preview-debug
Disallow: /preview-test
Disallow: /maintenance

# Archiv-Bots: ausgesperrt (Betreiber-Entscheid 06.09.2026)
#
# ANLASS: Beim Vergleich mit einem Wettbewerber am 06.09.2026 fiel auf, dass er
# genau das tut — seine Spur im Internet-Archiv endet im Mai, seitdem laesst sich
# nicht mehr nachsehen, was er wann geaendert hat. Umgekehrt konnten wir seine
# Seite von Januar bis Mai Zeile fuer Zeile mit heute vergleichen und sehen,
# welche Argumente er von wem uebernommen hat. Genau diesen Einblick nehmen wir
# uns hier gegenseitig.
#
# WAS DAS NICHT TUT: Es entfernt nichts, was bereits archiviert ist, und es
# beruehrt keine Suchmaschine. Google, Bing und die KI-Crawler oben bleiben
# ausdruecklich erlaubt — an unserer Sichtbarkeit aendert sich nichts.
#
# BEIDE KENNUNGEN, weil beide im Umlauf sind: `ia_archiver` ist die historische
# (urspruenglich Alexa), `archive.org_bot` die heute benutzte. Wer nur eine
# eintraegt, sperrt die andere nicht aus.
User-agent: ia_archiver
Disallow: /

User-agent: archive.org_bot
Disallow: /

# Archiv-Bots: ausgesperrt (Betreiber-Entscheid 06.09.2026)
#
# ANLASS: Beim Vergleich mit einem Wettbewerber am 06.09.2026 fiel auf, dass er
# genau das tut — seine Spur im Internet-Archiv endet im Mai, seitdem laesst sich
# nicht mehr nachsehen, was er wann geaendert hat. Umgekehrt konnten wir seine
# Seite von Januar bis Mai Zeile fuer Zeile mit heute vergleichen und sehen,
# welche Argumente er von wem uebernommen hat. Genau diesen Einblick nehmen wir
# uns hier gegenseitig.
#
# WAS DAS NICHT TUT: Es entfernt nichts, was bereits archiviert ist, und es
# beruehrt keine Suchmaschine. Google, Bing und die KI-Crawler oben bleiben
# ausdruecklich erlaubt — an unserer Sichtbarkeit aendert sich nichts.
#
# BEIDE KENNUNGEN, weil beide im Umlauf sind: `ia_archiver` ist die historische
# (urspruenglich Alexa), `archive.org_bot` die heute benutzte. Wer nur eine
# eintraegt, sperrt die andere nicht aus.
User-agent: ia_archiver
Disallow: /

User-agent: archive.org_bot
Disallow: /

# Sitemap
Sitemap: https://energieausweisapp.de/sitemap.xml
Sitemap: https://energieausweisapp.de/sitemap-ratgeber.xml