Roland Kamphuis Rotating Header Image

Posts Tagged ‘UPS’

Eaton Technodag Datacenters

eaton_logoOp de Storagefocus ben ik in contact gekomen met fabrikant Eaton. Eaton is een bedrijf wat een scala aan elektra producten kan leveren. Ik was voornamelijk wel geïnteresseerd in hun UPS modellen, met name de 93PM. Daar kom ik later op terug, want er bestaat een kansje dat ik dit model ga aanschaffen als vervanging voor de bestaande UPS in InterDC.

Via Eaton werd ik en collega Christian uitgenodigd voor hun relatiedag genaamd ‘Technodag Datacenters 2013’ in Hengelo. Agenda bestond uit een aantal interessante presentaties en een rondleiding door hun fabriek en Lab.
De presentaties zal ik je besparen, ging voornamelijk over de producten en ontwikkelingen bij Eaton, en een aantal gastsprekers over gerelateerde datacenter onderwerpen.
De rondleiding door het onafhankelijk Lab op het terrein van Eaton was zeer interessant. Daar hadden ze diverse proeven voor ons klaar staan die we konden bekijken. De mooiste proef was een kortsluitingsproef op 700 volt met 25.000 ampère. De kortsluiting veroorzaakte ze door een koperdraadje om de 3 fases heen te binden.

Neem even de tijd om de film te bekijken, nadat het alarm afgaat wordt de stroom ingeschakeld.
Om de test uit te kunnen voeren hebben ze een soort eigen aggregaat staan om de stroom op te wekken. Op die manier hoeven ze de stroom niet van het echte net af te tappen, want dan zou het net vervuilt raken en meer mensen om zo’n moment als deze last hebben van geknipper in het net.

Als laatste kregen we nog een rondleiding door de fabriek van Eaton. De fabriek in Hengelo bleek nog best groot te zijn, we moesten een flink stuk lopen om door alle hallen heen te komen. Onderweg zagen we indrukwekkende machines aan het werk. Zo werd er met een speciaal hars bepaalde componenten ingegoten, een robot die heel snel gaten maakt in dik metaal en medewerkers aan het werk die de producten assembleren. De producten die ze maken in Hengelo is maar een klein deel van hun totale assortiment.

eaton_rondleiding_fabriek

Medewerkers van Eaton bezig met assembleren van een elektronica schakel kast

De zeer geslaagde dag werd afgesloten met een borrel. Ook werd er een foto gemaakt van het gezelschap.

eaton_technodag_2013

Groepsfoto Eaton Technodag Datacenters 2013, rara waar staan Christian en ik?

Nieuw stroomnetwerk in InterDC

Begin april is onze elektricien al begonnen met het gereedmaken van het nieuwe elektra netwerk. Ik zal in het kort uitleggen wat er veranderd is.

Oude situatie
Stroom komt ons pand binnen wordt direct verdeeld en gaat naar de racks toe. In de racks hangt een 3u UPS van Apc die voor 30-40min noodstroom voorziet.

Nieuwe situatie
Stroom komt ons pand binnen en wordt als eerste naar de achteren geleid. Daar gaat de stroom eerst langs de toekomstige noodstroomaggregaat en wordt de stroom verdeeld over 2 stroomfeeds (verdeeld over de 3 fases). Een van de feeds gaat langs onze Ups. Vanaf daar gaat de stroom naar de racks.
Bij de schakeling door de UPS hebben we een by-pass paneel aangelegd, zodat we in de toekomst eenvoudig meer upsen kunnen toevoegen en onderhoud kunnen plegen zonder dat we de stroom hoeven te onderbreken!
Daarnaast zijn alle kabels alvast gekozen voor het maximale stroomverbruik zodat we deze niet meer in de toekomst hoeven te veranderen.

Nu de nieuwe situatie is afgerond kunnen de kleine upsen in de racks weggehaald worden. Wel laat ik de kleine UPS in de swtich/router rack hangen voor extra noodstroom.

De nieuwe UPS die achterin staat is een APC Galaxy 5000 UPS, welke goed is voor 30 kasten van stroom te voorzien. Mochten we 30 racks vol hebben kunnen we zonder onderbreking een 2e en een derde (n+1) unit toevoegen. Op moment geeft de Galaxy 5000 ons een accutijd van 1 uur en 17 minuten.

Tot slot hebben we ook de stroomfeeds aangelegd voor de 2e rij racks (2 feeds per rack, non-break & short-break).

Overstappen
Het moment van overschakelen tussen de oude voorziening naar de nieuwe stroomvoorziening vond plaats op 18 mei. Gedurende anderhalf uur hadden de racks geen stroom. Dat betekend niet dat het apparatuur offline ging. Met een flink aantal tijdelijke kabels midden door de gangpaden heen konden we het gat overbruggen. Het omschakelen leverde ook geen downtime op omdat de racks allemaal een eigen UPS had die een half uur stroom capaciteit had.
Totale downtime operatie: 0 min, 0sec.
Wel waren er 2 servers tijdens de hele operatie plotseling vastgelopen. De vraag is of dat pure toeval is of ergens een verband gelegd kan worden.

Nadat de servers over waren was het tijd om de airco over te zetten. Die ging gelukkig wat sneller omdat de nieuwe kabels al klaar lagen. En na een 5 min zonder koeling te hebben gezeten draaide de airco weer op volle toeren.

Vervolg
Om de 2e fase af te maken staan er nog 2 actiepunten open:
– Branddetectie systeem (VESDA)
– Acces control (zelfstandige toegang d.m.v. pasjes)
Beide punten zijn al in gang gezet.
En mocht het meezitten wil ik ook het noodaggregaat eind zomer hebben staan.

Voor nu een aantal foto’s:

 

InterDC: UPS bypass paneel

Eindelijk weer eens een post over InterDC. In februari heb ik de 2e bouwfase gestart van ons datacenter. Dat houd in dat de 60Kva (reeds aanwezig) aangesloten moet worden. Daarbij moest het hele stroomnetwerk veranderd worden. Eén van de key-elementen van het nieuwe stroomnetwerk is het bypass paneel. Dit is een paneel waarmee we de UPS met 1 schakelaar uit de stroomkring kunnen halen ZONDER STORING. Ofwel dit is een flink staaltje techniek wat een flink prijskaartje heeft. Het bypass paneel is op maat gemaakt, want we wouden totaal 3 ups-en eraan kunnen hangen, zodat we in de toekomst makkelijk nog 2 nieuwe ups-en kunnen toevoegen.

Wij hebben afgelopen vrijdag eindelijk het bypass paneel binnengekregen en daarmee zijn alle onderdelen binnen om de upgrade te starten. Hieronder een foto van het paneel.

60 Kva UPS voor interdc

Vandaag is het nieuwe UPS systeem binnengekomen die straks 30 racks voorzien gaan van batterij spanning. Daarmee kan ik voorgoed gedag zeggen tegen de kleine ups-jes die ik in ieder rack heb opgehangen.
Toen we begonnen met het inrichten van het datacenter waren de kleine UPS’jes een prima oplossing. Ik hoef pas een ups te kopen zodra het rack in gebruik genomen wordt. Op die manier was een grote investering in een globale ups niet nodig.
Nu kwamen we op het moment dat toen ik de 5e rack wou opleveren eindelijk de knoop heb kunnen doorhakken om een globaal ups systeem aan te schaffen. De kleine ups’jes bij elkaar van 30 racks kosten veel meer dan 1 globaal ups systeem.

Dus vandaag kwam de nieuwe UPS binnen. Het is een 60 kva UPS  (model Galaxy 5000) van het merk APC verdeeld over 2 kasten. In de ene kast zit aan ongeveer 800kg batterijen geschakeld. In de tweede kast zit alle electronica en schakkelingen die ervoor moeten zorgen dat bij stroomuitval direct overgeschakeld wordt naar de batterijvoeding. Het UPS systeem zal bij een volledige belasting 30 racks van ongeveer 10 tot 15 min van spanning kunnen voorzien. Meer dan voldoende tijd om een aggregaat te kunnen starten.

Volgende stap is dan ook een noodagregaat aan te gaan sluiten!

Hierboven een foto van de UPS. Tijdens transport is het linker pootje van de linker kast afgebroken. Deze wordt nog vervangen. We hopen eveneens de ups snel in gebruik te nemen, maar dat zal enige tijd nemen omdat we onze elektra infrastructuur moeten aanpassen.

InterDC: stroomvoorziening

Ieder rack in het datacenter krijgt een eigen stroomgroep. De stroom aansluitingen gaat op basis van het IEC 60309 standaard. Dat houd in dat via een blauwe campingstekker aansluiting stroom verkregen kan worden.
Iedere groep is voorzien van een digitale kWh meter. Per groep van 10 racks lopen er dikke 5 aderige / 3 fase kabels vanaf de lokale stroomverdeling op de datavloer naar de hoofdschakelkast.

Iedere rack krijgt standaard 1 aansluiting van max. 16 ampère. Indien gewenst kan er een 2e groep aangelegd worden.

De stroom die we inkopen is groene stroom welke bestaat uit 22% windenergie, 64% waterkracht en 14% biomassa. In de eerste opleveringsfase van het datacenter zal er nog geen aggregaat geplaatst worden maar wel een UPS systeem. Dit systeem is inmiddels aangeschaft en staat klaar om opgehangen te worden. De UPS zal genoeg stroom leveren om 15 minuten tot 30 minuten onderbreking te overbruggen, afhankelijk van de belasting.
In fase 2 wordt wel de noodaggregaat geplaatst.

Hieronder een foto van een aantal schakelingen, stroomaansluiting en kWh meter.

APC UPS ontvangen

Voor het serverhok op ons kantoor heb ik een UPS van het merk APC aangeschaft. Op die manier hebben straks de servers rustig de tijd bij een stroomstoring om af te sluiten.
Volgens de website van APC zou de APC voor 2 servers voldoende stroom moeten leveren zodat ze nog een 30 min online kunnen blijven.
De UPS werd op een pallet bezorgt, wat best bizar was gezien de omvang van het apparaat niet groter is dan een 2u server. Maar bij het optillen van de UPS werd al snel duidelijk waarom deze op een pallet stond. Het lieve beestje woog maar liefst 25kg. Dat zal dus vast komen door de grote batterijen die erin zitten.
Tot slot heb ik tevens een mini-ups van APC opgehangen in de meterkast. Die zal een twintig minuten stroom moeten geven voor de switch, router en modem. Op die manier zal internet ook nog even online blijven bij een stroomstoring.