Was der Crawler wirklich sieht: Serverlogs und der Blick ohne JavaScript
Keiner der großen KI-Crawler führt JavaScript aus. Eine Anleitung, wie man mit curl und den eigenen Serverlogs prüft, was GPTBot und ClaudeBot tatsächlich von einer Seite mitnehmen.
Weiterlesen