Drei Fragen, die man nicht mit einer Antwort beantworten kann
Trainieren, zitieren, abrufen: für Bots sind das drei verschiedene Erlaubnisse. Die meisten Seiten geben auf alle drei dieselbe.
Das Robots-Protokoll ist über dreißig Jahre alt und stellt eine einzige Frage: Darfst du diese Adresse abrufen? Für Suchmaschinen hat das lange gereicht, weil Abrufen und Anzeigen dasselbe Ziel hatten.
Bei KI-Systemen fällt das auseinander. Aus einem Abruf kann Trainingsmaterial werden, eine Fußnote in einer Antwort, oder beides — und wer nur „ja“ oder „nein“ sagen kann, sagt zwangsläufig zu etwas ja, das er nicht wollte.
Die drei Fragen
Trainieren: Darf Ihr Text in ein Modell einfließen? Das ist die Frage mit der längsten Wirkung — was einmal drin ist, kommt nicht wieder heraus.
Suchen: Darf Ihre Seite in einem Index stehen und in Antworten auftauchen? Das ist meistens die Frage, bei der man ja sagen will, denn hier entsteht die Sichtbarkeit.
Abrufen zur Laufzeit: Darf ein Assistent Ihre Seite in dem Moment holen, in dem jemand fragt? Hier bekommen Sie den aktuellen Stand in die Antwort, statt eines Trainingsstands von vorgestern.
Warum pauschal sperren teuer ist
Die reflexhafte Antwort auf KI-Crawler ist, alles zu blocken. Das schützt vor dem Trainieren — und kostet gleichzeitig die Sichtbarkeit, wegen der man die Website überhaupt betreibt.
Die drei Fragen getrennt zu beantworten ist deshalb kein technisches Detail, sondern die Stelle, an der eine geschäftliche Entscheidung überhaupt erst ausdrückbar wird.
Was auf dieser Seite steht
findready.ai beantwortet die drei Fragen für sich selbst und schreibt die Antwort in die eigene robots.txt: kein Training, Suche erlaubt, Abruf zur Laufzeit erlaubt.
Das ist nachprüfbar, und zwar von Ihnen: die Datei liegt offen. Eine Aussage über Auffindbarkeit, die man nicht am eigenen Haus vorzeigen kann, ist keine.