Antwort #8 am: 13. Januar 2014, 16:36:43
Ich habe sowas in der .htaccess drin stehen
Sehr Diskussionsbedürftig.
der Performance auch nicht zuträglich.
Auch das ist diskussionsbedürftig.
Die obige Liste, weil sie übertreibt. Es sind beispielsweise massenweise Bots ausgesperrt, und ich frage mich, wozu das gut sein soll, dafür gibt's in erster Linie die Datei robots.txt.
Jaaa, ich weiß: Die bösen Bots ignorieren den Standard. Ist wahr. Die richtig bösen Bots fälschen aber auch ihren User Agent.
Zumindest einige der Kameraden, die da per .htaccess ausgesperrt werden, sind viel besser über robots.txt zu steuern. Man muß dazu allerdings wissen, dass so ein bot nicht sofort auf einen disallow in robots.txt reagiert, sondern erst dann, wenn er ihn findet. Das kann leicht mal so ein, zwei Wochen dauern. So ein Bot hat nämlich besseres zu tun, als nach jeder Seite erst mal wieder diese Datei zu ziehen.
Bezüglich der IP-Adressen: derartige Adressbereiche verschieben sich gelegentlich, wer so arbeitet muss prinzipiell permanent nacharbeiten.
Bezüglich der Performance: Unser Indianer sortiert die Cowboys recht schnell aus. Unterm Strich dürfte also (bei ordentlicher Pflege) ein Performancegewinn übrig bleiben. Gerade wenn richtige Schweinepriester am Werk sind, ist der sogar deutlich messbar.