Bauarbeiter füllten mein SAN mit Beton und Mineralstaub

50

Update: EMC hat unsere Garantie und unseren Support eingestellt, sodass dies ein Versicherungsfall ist. Laut Dell können wir eine professionelle Reinigungsfirma beauftragen, die die Server repariert und unsere Garantie einhält. Cisco sagt "vielleicht". HP schweigt immer noch :(

Letztes Update: EMC hat die Reinigung durch ein zertifiziertes Unternehmen genehmigt. Die VNX wurde heute an uns zurückgesandt und funktioniert einwandfrei. Der Rest des Serverraums wird ebenfalls gereinigt, und unsere Verluste beschränken sich auf einige Bandlaufwerke. Die Versicherung übernimmt die Rechnung für fast alles andere.

Die ursprüngliche Frage:

Hier ist die Geschichte ..

Die Eigentümer des von uns angemieteten Gebäudes haben beschlossen, das Äußere zu renovieren. Dies beinhaltete einige ziemlich schwere Arbeiten auf der Ebene, auf der sich unser Serverraum befindet, einschließlich des Austauschs von Fenstern, die in eine Betonwand passen.

Mein roter Alarm ging aus, als ich hörte, dass sie dasselbe mit unserem Serverraum machen würden (ja, unser Serverraum hat ein Fenster. Wir sind ein kleines Geschäft mit 3 Gestellen. Das Fenster ist mit Stahlstangen gesichert.) Ich erklärte dem Auftragnehmer ausdrücklich, dass er eine temporäre Wand zwischen unseren Regalen und der ursprünglichen Wand anbringen muss - und sicherstellen muss, dass die temporäre Wand zu 100% luft- und wasserdicht ist. Sie versprachen es.

Die provisorische Wand hat eine kleine Tür, durch die die Arbeiter den ganzen Tag hindurch ein- und ausgehen können (durch unseren Serverraum, was die einzige Option war ...). Bei einigen Gelegenheiten konnte ich feststellen, dass die kleine Tür während der Arbeit abends / nachts halb geschlossen war. Ich schloss die Tür ab und dachte, dass sie hoffentlich bald zur Sache kommen und die Tür geschlossen halten würden. Ich gab sogar einem Elektriker einen Schluck, als ich sah, dass er die Tür nicht richtig schloss.

Zu diesem Zeitpunkt - ich wette, die meisten von Ihnen bekommen ein Bild von dem, was passiert ist. Ja, sie ließen die Tür wahrscheinlich offen, während sie in den Beton bohrten.

Ich präsentiere Ihnen unseren 4 Wochen alten EMC VNX: VNX-Festplatten VNX-Rack

Ich werde sogar einen kleinen Bonus einlösen, hier ist die APC UPS ein Rack weiter von der temporären Wand entfernt. Sehen Sie die schöne kleine Landebahn von meinem Finger? UPS

Was soll ich machen? Das Einzige, was mir in den Sinn kommt, ist, entweder alle unsere Lieferanten (EMC, HP, Dell, Cisco) anzurufen und sie zu beauftragen, Techniker zu schicken, um alle Geräte im Serverraum zu überprüfen, oder eine Art zertifizierten Konsulenten von Drittanbietern zu bestellen um alles zu überprüfen. Würden Sie mit dieser Ausrüstung Produktionssysteme betreiben? Wie lange?

Ich sollte auch erwähnen, dass unsere Klimaanlage angesichts der Beschaffenheit unseres kleinen Zimmers nicht gerade für Unternehmen geeignet ist. Es ist nur ein einziger Wechselrichter, der einmal ausgefallen ist, bevor ich hier angefangen habe (ausgefallene Wechselrichter führen normalerweise dazu, dass Wasser austritt).

pauska
quelle
8
Leider ist mir bekannt, dass produktionsbedingte Systeme unter wesentlich schlechteren Bedingungen laufen (man denke an Lagerhäuser). Aber es ist keineswegs ideal, vor allem für neue Ausrüstung. Ich würde untersuchen, ob ich eine Entschädigung für das Aufräumen bekomme, und vielleicht für die unvermeidlichen wenigen Lüfterausfälle. Es hängt jedoch in hohem Maße von Ihrem Luftstrom ab und davon, wie viel jede Geräteeinheit durch ihn zieht. Reinigen Sie mindestens den Raum, dann die Luftfilter oder Lufteinlässe am Gerät und achten Sie gut auf Temperaturen und Kühlung.
Sirex
Ja - obwohl es keine gute Sache ist, habe ich viel schlimmeres und kritischeres und teureres Kit gesehen. Lassen Sie es also sortieren, aber ich würde keinen bevorstehenden Ausfall erwarten.
Dan
Um schlecht zu lesen , dass EMC Garantie gesunken ist, die anderen Hersteller die gleiche ich Wette tun ... Do sein affraid keinen Anwalt in diese zu bringen ...
HTDutchy
1
Im Gegenteil: Haben Sie Angst, die Anwälte dazu zu bringen. Bringen Sie Ihre Beweise zusammen. Ja, lassen Sie sich professionell beraten. Wir hatten einmal ein ernstes Problem, bei dem uns ein Anwalt mitteilte, dass wir spürbare Schäden hatten. Es stellte sich heraus, dass wir keine hatten, und nach der Klage gegen den Verkäufer, die wir verloren hatten, hatten wir eine Klage gegen unseren Anwalt, die außergerichtlich entschärft wurde. Achten Sie sehr genau darauf, welche Schäden tatsächlich vorliegen und wer dafür verantwortlich ist. Wenn Sie einen vertrauenswürdigen Anwalt (haw) finden, erfahren Sie, welche Anstrengungen die Klage erfordert und wie hoch Ihre Chancen sind. Wenn sie sagen, es ist 100% klar, lügen sie.
Posipiet
1
Diese armen Babys!
Ben Brocka

Antworten:

22
  1. Holen Sie sich alle Techniker in.
  2. Lassen Sie alle Geräte überprüfen / reinigen.
  3. Senden Sie die Rechnung an den Bauplaner.

Wirklich, Server können ein gewisses Maß an Staub vertragen, aber das ist einfach zu viel. Wir reinigen unsere Server während der Ausfallzeit regelmäßig mit einem PC-Staubsauger von 3M . Es ist schön, im Büro zu sein.

Aber jetzt fang an zu putzen. Je schneller Sie den Staub von dort bekommen, desto besser. Versuchen Sie, Kühlkörper und Lüfter staubfrei zu halten. Wenn ein Kühlkörper oder Lüfter mit Staub bedeckt ist, ist seine Fähigkeit, Wärme abzuleiten, viel schlechter als eine saubere Einheit.

Bart De Vos
quelle
In diesem Fall sollte er sich wirklich mit der Einstellung eines Dienstes befassen, der auf die antistatische Reinigung von Serverräumen spezialisiert ist.
Erimar77
1
@ erimar77: Unsere Versicherungsgesellschaft ist gerade auf dieser Route :)
pauska
28

Erstens: Wenn der Serverraum zur Baustelle wird, müssen Sie aus verschiedenen Gründen alle Server entfernen.

  • Stromausfälle
  • Kühlungsausfälle
  • Zugriff (Sie wissen nicht, wer zu welcher Stunde an Ihren Servern vorbeigeht)
  • mechanische Beanspruchung durch Baumaschinen
  • direkter Schaden durch stoßgefährdete Arbeiter
  • Reststaub von der Baustelle, insbesondere metallischer oder mineralischer Staub

Der einzige sichere Weg ist, Ihre Server in einen anderen Raum zu verlegen. Dies bedeutet zusätzliche Abschaltungen, aber im Verlauf der Gebäudetätigkeiten müssen Sie die Abschaltung wahrscheinlich trotzdem durchführen.

(wohlgemerkt, das Folgende ist meine subjektive Meinung) Nun ist dies geschehen. Die Ventilatoren sind mit Mineralstaub bedeckt. Dies verringert möglicherweise ihre Lebensdauer durch Beeinträchtigung der Lager.

Ich würde nicht erwarten, dass die Server massiv ausfallen, aber ich würde einen höheren Prozentsatz an Ausfällen erwarten. Bei einem relativ großen Kunden stiegen die Lüfterausfälle nach der Bautätigkeit.

Andererseits würde ich mich nicht sehr bemühen, die Systeme zu reinigen. Wenn die Reinigung zu Schäden führt, ist sie wahrscheinlich größer als ein ausgefallener Lüfter. Es sei denn natürlich, der Staub enthält metallische Partikel, die das ganze Spiel verändern.

Was ist zu tun? Reinigen Sie den Raum, säubern Sie die Außenseiten der Server, und reservieren Sie Bargeld für zukünftige frühere Ersetzungen.

Der Schaden ist sehr wahrscheinlich nicht zu rechtfertigen. Der Teil des Schadens, den Sie nachweisen können, ist es wahrscheinlich nicht wert, vor Gericht zu gehen. Sie könnten versuchen, eine Entschädigung vom Vermieter zu bekommen, vielleicht eine reduzierte Zahlung oder so.

Posipiet
quelle
Was wir hätten tun sollen, ist nicht besonders hilfreich, aber ich stimme den Punkten zu, die Sie auflisten. Der Täter ist, dass ich (noch) nicht weiß, ob sich metallische Spuren im Staub befinden. Die andere potenzielle Gefahr ist der Ausfall der Klimaanlage, der zu feuchter Luft führen kann - was nicht gut mit Beton und / oder Mineralstaub kombiniert werden kann.
Pause
11
Da die Site von vielen anderen Personen gelesen wird, von denen einige Bauarbeiten in Kürze durchführen werden, ist das, was Sie hätten tun sollen, eine ziemlich nützliche Information, nur ein bisschen zu spät für Sie persönlich.
Sirex
5
Das ist richtig. Tut mir leid, dass ich ein bisschen fröhlich bin. Meine Stimmung ist momentan unterdurchschnittlich.
Pause
1
Dem muss ich zustimmen. Wir installierten neue abgehängte Deckenplatten, und während des Vorgangs bedeckten die Arbeiter die Server-Racks mit Plastikfolien. Zum Glück war ich da und die thermischen Warnungen erzeugten einen E-Mail-Alarm, aber ohne diesen wäre es Toast gewesen. Sobald die Server mit Partikeln kontaminiert sind, ist es sehr schwierig, sie rückgängig zu machen. Die Nebenwirkungen können lange anhalten und zu schwer zu lösenden Problemen führen.
Greg Askew