Technik · Sofortmaßnahme

Sperrt Ihre Website ChatGPT aus? Die robots.txt in einer Minute geprüft

11.08.2026 Lesezeit ca. 6 Min. Rembold's Digitale Medienschmiede
Technik · 1-Minuten-Prüfung
Stand: August 2026 · Lesezeit 4 Minuten

Es ist der teuerste Fehler, den eine Hotelwebsite haben kann — und zugleich der am schnellsten behobene: eine robots.txt, die KI-Crawler aussperrt. Steht dort die falsche Anweisung, kann kein einziger Satz Ihrer Website jemals in einer Antwort von ChatGPT, Perplexity oder Googles KI-Übersichten auftauchen. Egal, wie gut die Texte sind. Egal, was Sie in Marketing investieren.

Das Bittere daran: Die Sperre steht oft unbemerkt drin — gesetzt von einem Sicherheits-Plugin, einer Vorlage oder einer früheren Agentur, die es gut meinte. In unseren Prüfungen finden wir sie regelmäßig in Häusern, die gleichzeitig Geld für Sichtbarkeit ausgeben.

So prüfen Sie es — eine Minute, kein Fachwissen nötig

Tippen Sie in die Adresszeile Ihres Browsers Ihre Hoteladresse und hängen Sie /robots.txt an — also etwa www.ihr-hotel.de/robots.txt. Es erscheint eine schlichte Textseite. Suchen Sie darin nach diesen Namen:

Kritisch ist die Kombination aus einem dieser Namen und der Zeile darunter:

User-agent: GPTBot Disallow: /

Der Schrägstrich hinter „Disallow:" bedeutet: alles gesperrt. Steht dort hingegen „Disallow:" ohne etwas dahinter, ist alles offen — dann ist nichts zu tun. Achten Sie auch auf einen Block mit User-agent: * und „Disallow: /" — der sperrt sämtliche Crawler, auch Google selbst.

Sollte ein Hotel KI-Crawler überhaupt hereinlassen?

Für Verlage ist das eine echte Abwägung — sie leben vom Verkauf ihrer Inhalte. Für ein Hotel liegt der Fall anders: Ihre Website will gelesen werden. Sie ist keine Ware, sondern Ihr Schaufenster. Wer es verhängt, überlässt die Darstellung des eigenen Hauses vollständig fremden Quellen — Bewertungsportalen, Verzeichnissen, den Websites der Wettbewerber. Die KI antwortet dann trotzdem. Nur eben ohne Sie.

Die Korrektur

Die betreffenden Zeilen entfernen oder das „Disallow: /" durch „Disallow:" ersetzen — das erledigt Ihr Webdesigner in einer Viertelstunde. Bei WordPress lohnt zusätzlich ein Blick in die Einstellungen von SEO- und Sicherheits-Plugins (etwa Yoast, All in One SEO, Wordfence): Manche führen eine eigene Schalterliste für KI-Bots, die die robots.txt überschreibt.

Danach dauert es Tage bis wenige Wochen, bis die Crawler wieder vorbeikommen. Die Sperre aufzuheben holt keine verlorene Zeit zurück — deshalb gehört diese Prüfung an den Anfang jeder Sichtbarkeitsarbeit, nicht ans Ende.

Wollen Sie wissen, wie Ihr Haus dasteht?
Ein Anruf genügt — wir sagen Ihnen, was wir sehen, auch wenn daraus kein Auftrag wird.

01590 1754777  ·  07053 3909330

„KI-Sichtbarkeit für Hotels“ ist der Hotelbereich von Rembold's Digitale Medienschmiede, Calw. Dieser Beitrag ist eine fachliche Einordnung und keine Rechtsberatung.

Wollen Sie wissen, wie Ihr Haus in KI-Antworten dasteht? Wir messen es und sagen Ihnen ehrlich, was wir finden.