w2d-forum.de - die Internet-Community für web to date

Hallo BMS,

hier mal ein kleines Beispiel:Dies wäre bzw. eine Unterseite der Startseite.

Dies wäre eine bestimmte, ausgeschlossene Unterseite der Hauptseite "deine hauptseite".

Nachdem die erweiterte Seiteneigenschaft robots.txt auf Ja gestellt wurde, wird automatisch beim Erstellen der Seite die robots.txt erstellt. In welchem Ordner die Datei liegt siehts du unter Datei Website- & FTP-Eigenschaften Erstellen ( erzeugte Seiten speichern in: ).

Nach dem Erstellen der Seite öffnest du dann die robots.txt und fügst am Ende der Datei pro Zeile eine Disallow Anweisung ein. Anschließend kann die Seite veröffentlicht werden. Ist die Seite dann komplett hochgeladen überprüfst du am besten die robots.txt mit http://www.deine-webseite.de/robots.txt , dort sollten dann auch deine hinzugefügten Ausschließungen zu finden sein.

Alternativ könntest du natürlich auch die hochgeladene robots.txt im FTP-Hauptverzeichnis bearbeiten.

Bist Du sicher, das das beim nächsten Upload nicht überschrieben wird Thomas?

Ob die robots.txt bei jeder Erstellung der Seite geändert werden, auch wenn an den robots.txt Einstellungen nichts geändert wurde habe ich bisher noch nicht getestet, da ich lieber die robots.txt händisch erstelle und hochlade.

Wenn Sie ständig neu erstellt wird, müßte der Vorgang natürlich jedesmal wiederholt werden, weshalb das Hochladen einer eigenen robots.txt dann sicherlich ratsamer wäre.