Das HTTP (Hypertext Transfer Protocol) ist das Protokoll, über das Browser und Server Webinhalte austauschen. HTTPS ist die verschlüsselte, sichere Variante dieses Protokolls.Zum Glossareintrag → (HTTP) regelt, wie Browser oder Crawler Webseiten von einem Server anfordern und wie der Server antwortet. HTTPS (HTTP Secure) ist die verschlüsselte Variante: Die Datenübertragung wird abgesichert, was für Datenschutz und Vertrauen wichtig ist und heute Standard sein sollte.
Bei jeder Anfrage liefert der Server einen HTTP-Statuscode zurück, der den Ausgang beschreibt:
200– erfolgreich,301/302– Weiterleitung,404– nicht gefunden,403/429– Zugriff verweigert oder zu viele Anfragen.
Für die Suchmaschinenoptimierung sind Statuscodes aufschlussreich, weil sie zeigen, was Bots tatsächlich erhalten. In Server-Logs lässt sich erkennen, ob Crawler wie Der Googlebot ist der Webcrawler von Google, der Webseiten abruft, um sie für die Google-Suche zu crawlen und zu indexieren.Zum Glossareintrag → oder KI-Crawler sind automatisierte Bots, die Webseiten für KI-Anbieter abrufen, um Inhalte zu finden, für Suchfunktionen bereitzustellen, für Antworten abzurufen oder je nach Anbieter für Modelltraining zu verwenden.Zum Glossareintrag → erfolgreiche Antworten bekommen oder etwa durch 403- und 429-Fehler blockiert werden.