PerplexityBot ist der von Perplexity dokumentierte Crawler, der Websites in Perplexity-Suchergebnissen sichtbar machen und als Quelle verlinken soll. Laut Perplexity wird er nicht für das Training von Foundation Models genutzt.
PerplexityBot dient dazu, Inhalte für die quellenorientierte Suche von Perplexity zu finden und in Antworten zu verlinken. Perplexity dokumentiert daneben weitere Crawler wie Perplexity-User für nutzerinitiierte Abrufe.
Wer in Perplexity als Quelle erscheinen möchtest, sollte den Bot erlauben:
User-agent: PerplexityBot
Allow: /
Perplexity ist stark quellenorientiert und stellt Antworten mit sichtbaren Quellenlinks dar. Das macht die Plattform besonders nützlich, um , verlinkte Quellen-Domains und Antwortposition zu beobachten. Wird über erlaubt, aber durch eine Firewall oder ein mit Statuscode 403 geblockt, fehlen Inhalte dennoch. Ein Blick in die Server-Logs zeigt den tatsächlichen Zugriff.