"Robots-Tags" oder auch "Robots-Meta-Tags" sind Teil des HTML-Codes einer Webseite und dienen dazu, Suchmaschinen-Robots oder Bots anzuweisen, welche Teile der Webseite gecrawlt und indexiert werden sollen. Mit Robots-Tags können Webseitenbetreiber verhindern, dass bestimmte Seiten, Abschnitte oder Inhalte von Suchmaschinen erfasst werden.
« Zurück zur Glossar Übersicht
