Robots.txt
#1
Hallo Forumprofi-Team,
ich habe schon einen Thread eröffnet in dem es um die Veröffentlichung von zwei Threads in meinem Kennwortgeschützten Forum "cliquebeckum.forumprofi.de" geht.
Google kann die beiden veröffentlichen Treads so nicht entfernen, weil die beiden Threads erst durch Forumprofi, also den Webseiten-Betreiber blockiert sein muss.
Das kann durch eine Datei namens robots.txt geschehen.
Inhalt soll sein lt. Google:
Blockieren von User-Agents
In der Zeile "Disallow" werden die zu blockierenden Seiten aufgelistet. Sie können eine spezifische URL angeben oder ein Muster verwenden. Der Eintrag muss mit einem Schrägstrich (/) beginnen.
* Blockieren der gesamten Website: Tragen Sie nur einen Schrägstrich ein.
Disallow: /
Wie können wir hier weiterverfahren? Ich bitte Sie höflich um Unterstützung. Danke.
#2
#3
Eine robots.txt wird es in absehbarer Zeit eher nicht geben.
Zu der angesprochenen Problematik ist am ehesten zu vermuten, dass die Beiträge zu irgend einer Zeit einmal öffentlich zugänglich waren.
Wenn genau da der GoogleBot da war wurde das gespeichert und bleibt erstmal bei Google erhalten.
Alles in allem haben auch Bots nur die gleichen Rechte wie jeder Besucher auch - von unserer Seite jedenfalls wurden da keine Hintertürchen für bessere Indexierungen eingerichtet.
#4
#5
#6
#7
OK!
Vielen Dank.
Ich habe nun alle Bots gelöscht. War das klug?
In einem Fall habe ich zwar den ges. Inhalt gelöscht und ich vermute, dass die bei Google angezeigte Seite "Im Cache" so angezeigt wird, wie der sog. Google-Bot sie bei seinem letzten Besuch vorgefunden hat. D.h. ich müßte ihm eigentlich die Gelegenheit geben, die Seite nochmals zu besuchen, wenn der von mir geänderte Zustand festgehalten werden soll.
Oder ist es gar so, dass wenn Google-Bot nichts findet, die bisherigen Fundsachen als nicht existent betrachtet und nach einer endlichen Zeit entfernt?
Ist fast philosophisch, aber wäre prima, wenn ich da von einem Profi Rückhalt bekäme. Danach gebe ich auch Ruhe.........
- Forumprofi Support
- Upgrade auf Xobor-Forum
- Neuerungen
- Vorschläge / Ideen
- Fehlermeldungen / Bugs
- Allgemeine Fragen / Hilfe
- Foren-Vorstellung
- phpBB 2
- PHPBB2: Fehlermeldungen / Bugs
- PHPBB2: Fragen / Hilfe
- phpBB 3
- PHPBB3: Fehlermeldungen / Bugs
- PHPBB3: Fragen / Hilfe
- WBBLite
- WBBLite: Fehlermeldungen / Bugs
- WBBLite: Fragen / Hilfe
- MyBB
- MyBB: Fehlermeldungen / Bugs
- MyBB: Fragen / Hilfe
- PunBB
- PunBB: Fehlermeldungen / Bugs
- PunBB: Fragen / Hilfe
- SimpleMachines
- SMF: Fehlermeldungen / Bugs
- SMF: Fragen / Hilfe
Jetzt anmelden!
Jetzt registrieren!