Hintergrund:
Da trotz der originalen robots.txt immer der Cache voll-lief, ich war es leid den immer löschen zu müssen. Nun hab ich mir mal den Grund angeschaut, wieso das so ist und Fakt ist:
Die Suchmaschinen werden bei deren "Prüfvorhang" nicht richtig ausgeklammert.
IN der Datei steht "Disallow: /*XTCsid" richtig ist aber "Disallow: /*XTCsid*"
Somit hat sich das Problem bei mir mit den vollaufenden Cache erledigt...
Ich denke es dürfte euch auch erleichtern
Gruss
Daniel
Linkback: https://www.modified-shop.org/forum/index.php?topic=5906.0