02:00 Uhr 100% cpu und fast alle Server sind Down

[TooliaMc]

Bei uns gabs dieses Problem nun auch ... nur nicht in der Nacht sondern ab heute Vormittag (zeit weis ich jetzt nicht genau).
Schon komisch alle 4 kerne und die 4 virtuellen auf 100% auslastung. Nach nem kompletten Serverneustart scheint es jetzt zu funktionieren.

Was mir auch aufgefallen ist dass in der zeit als die Auslastung 100% betrug msql auch eine recht hohe Auslastung aufwies. Zwar nicht dramatisch aber es war mehr als sonst!


Gruß Luke

 

[Trig_ger]

Wird das selbe sein
guck mal in den log von gestern auf heute nacht gegen 02:00 müsste irgendwo ein

2012-07-01 01:59:59 [WARNING] Time ran backwards! Did the system time change?

Sein, also Ich denke:
es war etwas mit Hetzner...
RechenZentren 10 - 16
mfg

 

[Cabraca]

Hab da so ne Theorie, dass es etwas mit iconomy/chestshop zu tun hat. Laufen die Plugins zufällig bei euch?
Wenn ich bei Chestshop relativ schnell verkaufe kommt Vault/iConomy nicht mehr hinterher mit dem schreiben in die datenbank.
Ergebnis: Mainthread des Servers blockiert, Spieler verlieren die Verbindung, hoher load auf die Datenbank.
Das würde aber die 100% CPU nicht erklären. Dafür ist der Load auf die Datenbank zu klein.

Wären die Betroffenen Server einverstanden den Serverlog, art des servers(cracked,premium) und
ne pluginliste auf pastebin.com zu laden und mir das per PN zu schicken?

Eventuell gibts da gemeinsamkeiten.

 

[Jobsti]

Wir haben keine Probleme gehabt, nix auffälliges, kein out, keine Last-Spitzen, alles normal,
außer dass heute die ganze Nacht wieder fleißige Craftler net ins Bett wollten unterwegs waren

PS: Wir sind onlinemode=true.
Vault ja, iconomy nein.
Unsere MC DB ist von außen auch net erreichbar.
Im 100MB Server-log gibt's kein [WARNING] mit system, Time oder overload. (nur paar mal [WARNING] von NoCheat)


Mir ist gestern aber was ganz anderes aufgefallen:
Wir nutzen ne ältere Version von OnlinePlayers und alle Strato Web-Server waren offline,
somit hat der Server (Läuft nicht bei Strato, nur die Website) einfach gehängt (ohne Fehler, keine Commands mehr, nix), als besagtes Plugin versucht hat Daten rüber zu schieben.
Update auf neuste Version und Problem gelöst.

 

[Cabraca]

Problem geklärt:

Die in der vergangenen Nacht geschaltete Extrasekunde kann auf Linux-Rechnern zu dauerhafter CPU-Auslastung führen. Dokumentiert ist dieses Verhalten etwa im Blog der Mozilla Foundation, die vom Zeitpunkt der Schaltsekunde an seltsame Lastspitzen auf einem ihrer Server bemerkte. Die Lösung soll sehr einfach gewesen sein: Datum neu setzen, alternativ das System rebooten.

http://www.heise.de/open/meldung/Verlaengertes-Wochenende-kann-Linux-einfrieren-1629683.html

 

[minority-gaming]

Hätte ich jetzt nicht gedacht, aber immerhin ne antwort

Ich frag mich nur, warum unser mcmyadmin auch nach dem neustart dann nicht wollte

 

[carbon459]

Danke für die Info

 

[neolizzard2000]

Weil mcmyadmin an der Stelle keinen Einfluss auf die Systemzeit hat - ein kompletter Serverrestart hingegen schon.
Kleiner Workaround - ntp dienst abstellen.

Grüße

Neo

 

[Glowdragon]

Bei mir ist überhaupt nichts passiert, liegt es daran, dass der Server bei mir zu Hause läuft?
Vielleicht wurden mehrere Serverhosting-Anbieter per DDoS angegriffen, mir fällt da spontan Nitrado ein.

 

[Smuil]

Steht da oben nicht was von Linuxrechnern? Besitzt du zuhause einen, auf dem der Server läuft?

 

[Jobsti]

Hm... nur kommt's drauf an welche Distribution und build?
Bei mir war wie gesagt nix, Ubuntu Server 11 x64

 

[LeXaT]

Also bei mir rennt Ubuntu 10.04.4 LTS

ich hab auch nix von gemerkt,
anscheinend sind sich sogar die Probleme zu fein mich zu belästigen =)

gruß

LexaT

 

[Benni1000]

Ubuntu ist dagegen resident soweit ich weiss.
Redhat Enterprise Linux ist auch immun.
Aber debian ist es leider nicht.

 

[Hardtastic]

Also wir sind RZ10 und RZ15 - bekamen aber von einem Angriff nichts mit... Iwer von euch auch noch in 10 oder 15 ?

 

[zh32]

Du hast dir den Thread aber schon durchgelesen, oder!?

 

[Endless1989]

möp zu langsam und lange zu spät ^^

Gruß endless

 

[Samses_I]

@Mods: Bitte closen -> Thema hat sich geklärt und es wird immer sinnloser...

 

[Cabraca]

Noch ne kleine Info am Rande:

Um etwa ein Megawatt ist der Stromverbrauch in den Rechenzentren von Hetzner Online in der Nacht des Monatswechsels gestiegen, weil viele Linux-Systeme aufgrund eines Kernel-Fehlers bei der Handhabung der um Mitternacht eingefügten Schaltsekunde den Prozessor voll belasten.

http://serversupportforum.de/forum/showthread.php?p=314185#post314185

 

[Cabraca]

Noch ne kleine Info am Rande:

Um etwa ein Megawatt ist der Stromverbrauch in den Rechenzentren von Hetzner Online in der Nacht des Monatswechsels gestiegen, weil viele Linux-Systeme aufgrund eines Kernel-Fehlers bei der Handhabung der um Mitternacht eingefügten Schaltsekunde den Prozessor voll belasten.

http://serversupportforum.de/forum/showthread.php?p=314185#post314185

 

[Trig_ger]

Hi
@Cacraca ja haben wir Chestshop und Iconomy
problem an der sache Nijikokun [Scripter Ico] hat jetzt aufgehört...
Acrobot [Scripter ChestShop] meine er wird evtl mit Bos weiterarbeiten,
na mal sehen was als nächstes kommt für chestshop.
Die schaltsekunde hat anscheinend doch noch nachwirkungen...
http://www.heise.de/newsticker/meldung/Schaltsekunde-Linux-kann-einfrieren-1629683.html
mfg