DseWiki: SlurpProbleme

Ich möchte euch (vor allem die neuen Benutzer des DseWiki, die durch den IX-Artikel aufmerksam wurden) bitten, keine Slurp-Programme auf das DseWiki anzusetzen, weil die Performance für alle Benutzer beschädigt wird, wenn Programme bis zu 20-30 Requests pro Sekunde absetzen. Die Programme sind zu unintelligent konfiguriert und gehen in alle Edits, diffs und Suchfunktionen, die auch auf einer lokalen Kopie uninteressant sind. Die IP von der ein Slurp ausgeht, wird geblockt, bis die Requestüberflutung eingestellt wird. -- HelmutLeitner

17.9.2002

Seit etwa 3:15 Uhr habe ich massive Probleme.
Nichts geht mehr - Dauernd Timeouts. --hs

: Mmmmh. Es war eine ausgesprochen ruhige Nacht mit ca. 200 Zugriffen zwischen 0-6 Uhr. Also an der Belastung des Wiki oder einem Slurp kann es nicht liegen. Hast du ein "tracert www.wikiservice.at" versucht? -- hl

Hmmm, ich hatte weit über 10mal "Connecting ... Timeout" erlebt. Zuvor hatte ich das noch kein einziges Mal erlebt. Das betraf nur die Wiki-Domain. Traceroute hatte ich nicht probiert.--hs

16.9.2002

16:00-16:30 ca. 1200 Requests (dclient217-162-133-122.hispeed.ch ) von diesen wurden ca. 960 automatisch geblockt.

Frage: Ist jemandem in der Zeit 15:55-16:30 MEZ eine Beeinträchtigung der Performance aufgefallen? -- HelmutLeitner

Requests ab 15:55 : 235 (erstes Blocking)
Requests ab 16:00 : 339
Requests ab 16:05 : 154
Requests ab 16:10 : 124
Requests ab 16:15 : 104
Requests ab 16:20 : 83
Requests ab 16:25 : 76
...
Requests ab 16:55 : <5 (unblocking)

13.9.2002

17:03-17:24 ca. 1500 Requests von 80.135.230.33, musste ich leider blocken. -- HelmutLeitner

16:15-17:01 ca. 3000 Requests von 80.135.225.124. Erst nachträglich bemerkt.

19.6.2002

18:00-19:00 ca. 4000 Requests Im Moment haben wir das erste ernsthafte slurp-Problem im DseWiki. Dabei sendet ein relativ unintelligentes Programm tausende Requests - vermutlich um ein komplettes Abbild des Wiki lokal abzubilden - in relativ kurzer Zeit, kommt aber mit der vernetzten Struktur des Wiki und den sich wiederholenden Bedienungselementen auf jeder Seiten nicht sinnvoll zurecht und schickt alle Requests vielfach. Irgendwann landet dann die IP-Nummer in einem Killfile und alle weiteren Requests werden mit einer Sperrmitteilung abgefertigt. Aktuelle IP: 212.95.31.57 (fw1-vie-pub.1012internet.at). -- HelmutLeitner

Siehe auch:

WardsWiki:WikiSlurp

KategorieDseWiki KategorieWikiProbleme