Der Meta-Robots-Tag ist ein HTML-Element im <head> einer Seite, das Suchmaschinen Anweisungen zur Indexierung und Linkverfolgung gibt, etwa noindex oder nofollow.
Der ist ein -Element im <head> einer Seite. Er gibt Suchmaschinen Anweisungen, ob eine Seite werden darf und ob Links auf der Seite verfolgt werden sollen.
Beispiel:
<meta name="robots" content="noindex, follow">
Gängige Werte sind index/noindex (Indexierung erlauben oder verhindern) und follow/nofollow (Links verfolgen oder nicht). Mehrere Werte sollten möglichst in einem einzigen Tag kombiniert werden, um Widersprüche zu vermeiden.
Der Meta-Robots-Tag eignet sich für normale HTML-Seiten. Damit Suchmaschinen ihn lesen können, muss die Seite sein; eine Blockade per robots.txt verhindert das. Für Nicht-HTML-Dateien wie PDFs wird stattdessen der im -Header verwendet.