Schlagwort-Archive: sperren

Beta: Sperrliste für aggressive Bots

Auf fast allen Kundensystemen beobachten wir seit einigen Monaten mit zunehmender Intensität negative Auswirkungen von aggressiven Suchmaschinen-Bots. Die großen und etablierten Suchmaschinen (z.B. Google, Bing, usw) verhalten sich beim Abruf der Webseiten eher unauffällig und indizieren die Seite in einem Tempo, welches auch für … Weiterlesen

Veröffentlicht unter Technik | Verschlagwortet mit , , , | Hinterlasse einen Kommentar