Antwort #53 am: 28. Juli 2015, 17:58:09
Gibt es hier zu dem Thema
Disallow /templates/ eigentlich eine verlässliche Aussage die man auch belegen kann ?
Ist Alfreds Aussage so korrekt ?
...
User-agent: *
Disallow:
Was nicht in den Index soll muss noindex bekommen.
Die robots.txt kann nur das crawlen verbieten aber nie das indexieren.
Daten die keinen etwas angehen gehören nicht auf den Webspace.
Gruß
Insofern sich Tante G. wirklich an die
robots.txt hält, ist es doch außerdem sinnvoll wie es bisher war (ausgenommen das Thema
Disallow /templates/), nämlich das Indexieren von Seiten wie
/account.php,
/account_edit.php,
/account_history.php, usw.auszuschließen.
Gruß,
noRiddle