GEO-Lexikon

Was sind Content Signals?

Content Signals sind eine Erweiterung der robots.txt, mit der Website-Betreiber angeben, wofür ihre Inhalte nach dem Abruf genutzt werden dürfen: für die Suche, als Grundlage für KI-Antworten oder für das Training von KI-Modellen.

Kurz erklärt

Die klassische robots.txt regelt nur, ob ein Crawler eine Seite abrufen darf. Content Signals ergänzen, was danach mit dem Inhalt passieren darf, etwa: „Suche ja, KI-Training nein.“ Cloudflare hat das Format im September 2025 vorgestellt.

Stand:

Welche Content Signals gibt es?

SignalBedeutung
searchInhalte dürfen für einen Suchindex und Suchergebnisse mit Link genutzt werden.
ai-inputInhalte dürfen als Grundlage für KI-Antworten dienen, etwa beim Grounding.
ai-trainInhalte dürfen zum Training oder Feintuning von KI-Modellen genutzt werden.

Wie sieht das in der robots.txt aus?

User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: /

Fehlt ein Signal, äußerst du dazu keine Präferenz. Wer die verwaltete robots.txt von Cloudflare nutzt, bekommt standardmäßig search=yes, ai-train=no.

Sind Content Signals verbindlich?

Technisch nicht. Wie die robots.txt selbst sind sie eine Erklärung deiner Präferenzen, die Crawler beachten können, aber nicht müssen. Sie dokumentieren aber eindeutig, was du erlaubst und was nicht. Wer Crawler sicher aussperren will, braucht zusätzlich Regeln in der Firewall oder im CDN.