Vorbereitung

Damit die Suchmaschiene auch alle gewünschten Daten in ihren Suchindex aufnehmen kann, sollte jede Seite Meta-Tags enthalten.

Beispiel für Meta Tags

<meta name="keywords" content="HTML, Meta-Informationen">
<meta name="description" content="Beschreibung der Seite.">
<meta name="robots" content="index,follow">

  

nach oben

Sie sollten auch eine robots.txt Datei anlegen, damit Sie ht://Dig sagen können, welche Dateien und Verzeichnisse es in den Index aufnehmen darf bzw. nicht darf.

Beispiel für robots.txt

# robots.txt zu http://www.ihre-domain.de/

User-agent: UniversalRobot/1.0
User-agent Space-Bot

Disallow: /quellen/dtd/
Allow: /quellen/dtd/index.html

User-agent: *
Disallow: /unsinn/
Disallow: /temp/
Disallow: /newsticker.shtml


  

	Seite 5/6

nach oben