26. Wie kann man erreichen,
das ein gelisteter Eintrag z.B. in google.de gelöscht
wird ?
Antwort:
Zum enfernen eines Eintrag in Suchmaschinen gibt es mehrere Möglichkeiten.
1. Möglichkeit: Robots.txt
Die einfachste Variante einen Eintrag aus dem Datenbestand einer Suchmaschine
zu entfernen ist die Möglichkeit per Robotx.txt. Mit folgender
Anweisung in einer Robots.txt Datei können Sie eine bestimmte
Datei oder ein Verzeichnis für Suchmaschinen sperren.
Disallow: /zuLöschendeDatei.html
Disallow: /zuLöschendesVerzeichnis/
Hierdurch erkennt die Suchmaschine
das die gesperrte Datei bzw. das
gesperrte Verzeichnis nicht mehr
gelistet werden soll. Eigentlich
dient eine Robots.txt Datei nur dazu
bestimmte Verzeichnisse oder Dateien
für Suchmaschinen-Crawler zu
sperren. Ursprünglich soll also
nur das neuindexieren von Inhalten
vermieden werden. Allerdings ist
davon auszugehen das Suchmaschinen
die Inhalte auch aus Ihrem Datenbestand
löschen wenn sie sie nicht mehr
indexieren dürfen. Das Problem
hierbei ist die Dauer bis zur Löschung.
Oft erscheinen trotz einer Sperrung
per Robots.txt Datei der gesperrte
Inhalt weiter in den Suchergebnissen.
(Wenn auch schlechter gelistet).
Erst nach gewisser Zeit verschwinden
die gesperrten Einträge aus
dem Index. Erfahrungen zeigen das
dies durchaus auch mal 6-8 Wochen
dauern kann.
Weitere Infos zu Robots.txt Dateien
2. Möglichkeit: Metatags
Mit Metatags können Sie einem Suchmaschinen Crawler mitteilen
wie er mit der Datei zu verfahren hat die er gerade einliest. Möchten
Sie Inhalte aus dem Suchmaschinen-Index entfernen so können Sie
dies einer Suchmaschine mitteilen indem Sie folgende Metatags in den
zu löschenden Dateien notieren.
Dieser Eintrag verhindert das die
Inhalte Archiviert werden (z.B. im
Google Cache):
< META NAME="ROBOTS" CONTENT="NOARCHIVE">
Dieser Eintrag verhindert das die
Inhalte vom Suchmaschinen-Crawler
eingelesen werden. Es werden also
alle Robots daran gehindert, die
Seite zu indizieren in der Sie dieses
Metatag notiert haben.
< META NAME="ROBOTS" CONTENT="NOINDEX">
Um den Suchmaschinen-Robots auch
von Dokumenten fernzuhalten auf die
von einer bestimmten Datei per Hyperlink
verwiesen wird notieren Sie bitte
folgendes Metatag in der entsprechenden
Datei.
< META NAME="ROBOTS" CONTENT="NOFOLLOW">
3. Möglichkeit: Löschen
der Dateien auf dem Server
Eine einfache aber auch langwierige Methode Seiten aus dem Suchmaschinenindex
zu löschen ist die, einfach alle Dateien die Sie nicht mehr im
Suchmaschinenindex gelistet haben möchten auf Ihrem Server/Webspace
zu löschen. Bei der nächsten Besuch Ihrer Website wird der
Suchmaschinenrobot feststellen das die Dokumente die er einlesen möchte
nicht mehr vorhanden sind. Nach einigen erneuten versuchen werden die
nicht mehr vorhandenen Dateien aus dem Index der Suchmaschinen entfernt
werden.
Denn keine Suchmaschine möchte
404 Fehlerseiten im Suchergebniss
präsentieren. Allerdings ist
diese Methode wie ebenfalls etwas
langwierig. Es kann durchaus längere
Zeit dauern bis die gelöschten
Seiten auch aus dem Datenbestand
der Suchmaschinen gelöscht sind
und nicht mehr im Suchergebniss erscheinen.
Dies hängt vor allem damit zusammen
das Suchmaschinen mehrere Rechenzentren
nutzen.
Zwar sind diese Rechenzentren durchaus miteinander vernetzt. Allerdings
werden (je nach Suchmaschine) die Datenbestände der einzelenen
Rechenzentren nicht zum gleichen Zeitpunkt aktualisiert.