Die .htaccess ist eine mächtige Waffe gegen Content Diebe. Die .htaccess Regel fügt zu den eigentlichen Server Regeln eigene hinzu. So kann der Webmaster, der nur ein Webshare Angebot hat, individuelle Regeln erstellen, ohne seinen Hoster anzuschreiben und so diese Veränderungen für alle Untermieter geltend zu machen.
In der Vergangenheit habe ich ja schon mehrere Beispiele zum Einsatz der htaccess hier im Blog präsentiert, wie zum Beispiel: Double Content vermeiden durch das definieren einer Standard Domain, oder Spam bots, anhand ihrer Kennung, aussperren.
Die Server der Content Diebe, die Seiten auslesen und deren Inhalte klauen, gehören meistens zu ganzen Netzwerken. Wenn also Server A keinen Zugriff mehr hat, macht Server B weiter usw. Jeden Server einzeln sperren wäre viel Arbeit. Viel Effektiver wäre es das ganze Netzwerk eines Severs zu sperren oder sogar den Zugriff aus ganzen Ländern zu verbieten.
Htaccess Listen können ganz schnell, ganz schön lang sein. Eine Liste, die Amerika aussperren würde, wäre ganz schön umfangreich, der Effekt wäre ein verlangsamter Abruf der Seiten. Sistrix hat zwei Anleitungen veröffentlicht, wie man ganze IP-Netze sperrt und wie man ganze Länder dank .htaccess sperren kann.
So konnte ohne .htaccess ein Durchsatz von 4616 Seiten pro Sekunde erzielt werden während mit der Liste nur noch 15 Zugriffe pro Sekunde verarbeitet werden können.
Ein Liste bei einem Land wie Korea hingegen, mit offenen Proxy Servern, würde nicht so ins gewichtfallen.
So sind bei Sperrung des Landes der offenen Proxys (Korea) mit dem Entwicklungsserver noch 2319 Zugriffe/Sekunde möglich.
Man sollte also immer vermeiden mit dem Bazooka auf eine Ameise zu schießen, sondern sich genau überlegen, welche Länder bzw. IP Bereich wirklich zu sperren sind und welche nicht. Auf wenn man eine Deutsche Seite hat, macht es durchaus Sinn bspw. Italien nicht auszusperren, da es auch dort Deutsche gibt
Via Seofreak
Trackback- Bigfinder.de via htaccess aussperren
Wer die Suchmaschine bigfinder.de aussperren kann das mit dieser einfachen htaccess Rule machen. Htaccess sperren sind übrigens die effektivsten Sperren die man nutzen kann um... - Content Diebe und komische Whois Angaben
Tobbi hat es erwischt, er ist ein Opfer von Content Dieben geworden. Content Diebe haben meistens Bots in ihren Diensten, die das Web nach Rss-Feeds durchsuchen,... - 10 htaccess die man als SEO kennen sollte
In seinem Post 10 htaccess Hacks Every SEO Should Know | listet Kevin Spence 10 htaccess Regel auf die man als SEO kennen sollte. Eine... - Expired Content – Was tun mit abgelaufenem Content?
Im neuen Whiteboard Friday erklärt Rand Fishkin wie man mit expired Content, also Texte die nicht mehr aktuell sind, umgehen soll. Der schlechteste Weg ist...
Hinterlasse ein Kommentar