Homepage selbermachen 7.851 Themen, 35.616 Beiträge

ROBOT.TXT & SUCHMASCHINEN

doppelstern4 / 4 Antworten / Flachansicht Nickles

Hi!
Ich habe 3 Fragen:
1. Einige meiner HP-Unterseiten sollen nicht von Suchmaschinen erfasst werden, desshalb habe ich eine robot.txt-Datei in mein Basisvezeichnis abgelegt.
Dummerweise aber erst, NACHDEM sie bereits von den Suchmaschinen erfasst wurden. Meine Frage nun: Werden die nun gesperrten Seiten beim nächsten Robot-Besuch aus dem Suchmaschinenverzeichnissen gelöscht oder nicht?

2. Hier geht es um meine alte HP, welche immernoch von den Suchmaschinen angezeigt wird, obwohl ich den Account schon vor Wochen gelöscht habe. Erkennen die Suchmachinen selbstständig, das es diese Seite nicht mehr gibt und wird der Eintrag dann automatisch gelöscht?

3. Ich habe den Dateinamen einer meiner HP-Unterseiten geändert.
Von den Suchmaschinen wird diese alte Datei aber immernoch angezeigt, was natürlich die Meldung: "Seite nicht gefunden" verursacht.
Um dies zu vermeiden, habe ich eine "Umlenkdatei" eingerichtet die auf
den neuen Dateinamen verweist und ausserdem zusätzlich den alten Dateinamen mittels robot.txt sperren lassen.
Meine Frage hierzu: Kann ich damit rechnen, das diese alte Datei nun bald aus dem Suchmachinenverzeichnis verschwindet?

Gruss, Klaus :-)

bei Antwort benachrichtigen
J-G-W doppelstern4 „ROBOT.TXT & SUCHMASCHINEN“
Optionen

I.d.R. sucht die Suchmaschine die alten Einträge ab, ob diese noch vorhanden sind. Wenn ja ist diese glücklich, wenn nein werden sie (siehe hadu) irgend wann meistens gelöscht, aber das kannn dauern...
Wenn Du aber so klever wie HM bist und für die nicht mehr vorhandene Seite eine neue seite anlegst, dann findet die Suchmaschine ja noch etwas! Verlang bitte nicht, das die dann auch noch den Inhalt beurteilt und versteht, dieser Eintrag gilt nicht!
Und die Robot.txt wird dann meistens nicht beachtet, da der Eintrag ja schon vorhanden ist. Also, nachher ist immer zu spät, nach dem Sex zwei Kondome überziehen schützt weder vor Aids, noch vor Kindern!

Aber es gibt eine Lösung, und wenn Du die Links nicht so www.seite.de/sparte/Oma-Bilder.html sondern nur so /sparte/Oma-Bilder.html gesetzt hast, dann verschiebe einfach alles in einen Unterordner und lege auf der Nullebene eine neue Index.html an. Die kann entweder nur sofort weiterleiten oder eine speziell für Suchmaschinen optimierte Startseite (mit unsichtbaren Texten etc.) sein. Dann hilft auch eine neue Robot.txt weiter, aber nur wenn Du die zuerst installierst!
Machst Du dann nichts weiter, verschwinden die alten seiten aus den Suchmaschinen im laufen von vielen Wochen und Monaten, wenn Du aber dort Links zu Deiner (neuen) Startseite setzt, bleiben sie immer erhalten, da es die Seite für die Suchmaschine noch immer gibt.

bei Antwort benachrichtigen