Wir blocken grundsätzlich keine bekannten KI- und sonstigen Crawler.
Blockiert werden nicht identifizierbare Bot bzw. Code-basierte Anfragen.
Für KI Crawler haben wir derzeit keine separaten oder expliziten Limits im System.
Bei KI Agenten haben wir bislang in allen Fällen schlussendlich identifiziert, dass die KI eigenen Sandbox Limits dazu führen, dass die Tools nicht direkt auf externe Quellen / Webseiten zugreifen können. Und gerade nicht der externe Server etwas blockt.
Bitten Sie die KI einmal um eine technische Analyse der Verbindungsprobleme mit
- Ausgabe der verwendeten IP Adresse für die Anfrage,
- der Antwort des Servers und
- aller Metadaten des Server Responses.
Sollte die KI den Fehler weiterhin auf Seiten des Ziel-Servers sehen, schicken Sie uns diese Informationen, damit wir eine Freischaltung vornehmen können.