Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

36
Hvordan man bygger Danmarks største Tier 3 datacenter v/ Per Skovgaard Rosen, Teknisk direktør, Nianet

description

Hvordan bygger man Danmarks største Tier3-datacenter? Hør om alle de spændende fakta og intelligente løsninger direkte fra teknikerens mund omkring strømtilførsel langt over normalen, tonstunge generatorer, skal-i-skal-indretning og kuber med vind i håret. Hør også DONG Energy fortælle om etableringen af specialdesignet serverrum hos Nianet - hvorfor vælge at outsource frem for at bygge selv?

Transcript of Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Page 1: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Hvordan man bygger Danmarks største Tier 3 datacenterv/ Per Skovgaard Rosen, Teknisk direktør, Nianet

Page 2: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Hvem er Nianet ?

Nianet er Danmarks Erhvervsfibernet

10 års fødselsdag sidste år

I dag er vi landets hurtigst voksende fibernet, og vi er dedikeret til at levere fiberløsninger til det private og offentlige erhvervsliv

Nianet har fokus på Internet, MPLS, Co-location og Cloud

5 datacentre i Danmark

Lige over 100 medarbejdere fordelt på 2 kontorer

I 2013 omsatte Nianet for ca. 250 mio. kr.

Page 3: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Designkriterier

Tier 3 iht Uptime Institute Beliggenhed HøjdekoteAfstand til fiber traceer og site 2Størrelse på bygning – fysisk konstruktionRum-i-rum – materialevalgOpbygning i kuber eller fritståendeRacktyper (1/1, ½ og ¼)Køleløsning og kølemiddelMiljøneutralt og økonomisk

Sikkerhed iht SKAFOR GulUdenomsareal til teknikgårdAdgangsforhold, ITV, ADKIngen elektronik under gulvBrandslukning, ABA

FysiskGrundinstallation klar til udbygningFaseopdelt udbygningSkalerbartMålbart forbrugBedste praksis og kendt teknologi• Leading edge ikke bleeding Forhold kW per m2/Rack

Enkelt og tilgængeligtFleksibilitet og hastighed I leveranceOn-line kontrolPraktiske adgangsforholdKontor- og toiletfaciliteter“Rundt hjørnet”Synligt forbrugAttraktivt TCO

Kapacitet

For kunder

Sikkerhed

Page 4: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Tier 3 iht. Uptime Institute

Page 5: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Terrænkoter (koter i DVR90)

Page 6: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Hvad vi forestillede os…

Page 7: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Hvad det blev til…

Page 8: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Fase 1 – 426kW serverlast

Page 9: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Fase 2 – 1.250kW serverlast

Page 10: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Sikring, overvågning og faciliteter

Lokal PLC teknologi samt CTS

Områdesikring hegn/porte

Milestone ITV ude og inde

ADK med anti-passback

Slusefunktion ved indgang og vareindlevering

Udpakkerum og papcontainer

Lift, serverlift, it- og transportborde

Kontorfacilitet og toilet

Patch-adgang til serverrum

24/7 bemandet NOC

Page 11: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

PAROC rum-i-rum-løsning

Datacenteret er opbygges med PAROC elementer – 100 mm isolering og stål

Fastgjort i et stålkonstruktion i 4 meters højde

2,5 meter serviceloft over rum

Tag er sealet og med fald mod gangareal

BS60 brandklassifikation

Page 12: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Gulve

800 kg ultimate load og 2600 kg/m2 jævnt fordelt

Antistatisk vinyl/linoleum

Færdig højde til overkant: 750 mm

Jording: Klemmer til jording monteret på ben

Endvidere:Panel: PLTMM gulvpanel med ABS kanter

Mål: 600 x 600 x 38mm

Norm: BSEN 12825 – klasse = 3/A/2

Deflection: > 2,5mm og sikkerhedsfaktor på 2

Brandklasse: REI 30 /EN 13501 vedr. modstand – fra klasse 1 CSE/RF

Brandklasse: REI 60 /Circular 91 vedr. materiale

Antistatisk: ≤ 2 x 1010 Ω

Page 13: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Føringsveje

Nord- og syd fiberindføring i bygning

Nordligt og sydligt ODF rum

Redundant føringsvej for stærkstrøm og signalkabler over/under loft i separate brandceller

Signalkabler gennem ”Hilti muffe”

Page 14: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Rack og kuberSaifor racks arrangeret i kuber

Page 15: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Afgangsboks med måler

Schneider Canalis 160A strømskinne Nianet afgangsboks med PowerApp måler

Page 16: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Afgangsbokse – 4 typer

230V 16A 230V 32A

400V 32A

2 x 230V 16A

Page 17: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Mit.nianet.dk

Page 18: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Strøm – Dobbelt transformator og generator

Trafoer - 2 stk. 1000KVA – forberedt for 1600KVA2 stk. Gesan 1000KVA (n+n) 16 timer drift

Page 19: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Strøm – Plads til udvidelse

Forberedt til 6 stk. Gesan 1000KVA (n+n)16 timer kontinuerlig drift ved 50% last (A+B)

Page 20: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Strøm – Tavlerum

2 stk. 3200A hovedtavler A/BDimensioneret efter 65kA kortslutningsstrøm

Page 21: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

UPS

2 stk Socomec 500 KVA / 500kW (n+1)ca. 10min fuld last. Forberedt for 4 stk.

Page 22: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Køling - Frikøling

Frikøl = 100 % < 11˚C - Kombikøl >11˚C <16˚C1 stk. 646kW (n), forberedt for 2 stk. (n)

Page 23: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Køling – 4 stk. Wilo cirkulationspumper

Trykstyret Wilo pumper opsat i master/slave (n+1). Ca. 15.000 liter EthylenGlykol EG30%, 2 bar tryk

Page 24: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Køling - Kompressorkøl

3 stk. 289kW (n+1), forberedt for 6 stk. 289kW (n+1)

Page 25: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Downflow Units

BlueBox n+1 konfiguration per rum (100-200KW)Luft i trykkammer under gulv min. 50Pa med EC fan

Page 26: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Brandslukning

Rumsektioneret RS anlæg

Aktiv aspirationssystem (Senator) over og under gulv

Central ABA opkoblet mod kontrolcentral

Firebeta slukningscentral

4-12 stk. 80liter/300bar Argonite(50 % Argon/50 % Nitrogen)

Trykspjæld til bufferzone over loft – brandudluftning

Page 27: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Eksempel på kundespecifik indretning

200kW installation (n+1)

Page 28: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Spørgsmål – efter kundecase

Page 29: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Co-location

ENERG

I I FORA

ND

RING

Page 30: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

DONG Energy er en af Nordeuropas førende energikoncerner

30

Vores forretning er baseret på at fremskaffe, producere, distribuere og handle energi og tilknyttede produkter i Nordeuropa.

DONG Energy beskæftiger 6.500 medarbejdere og har hovedsæde i Danmark.

Customers & Markets

Exploration & Production

Thermal Power

Wind Power

Page 31: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

≈ 150 Lokationer≈ 6500 Brugere≈ 1000 fysiske servere≈ 1300 virtuelle servere≈ 4 petabyte storage• 4 datacentre

Infrastruktur i tal

31

Page 32: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Nyt Datacenter?

32

Øget pladsbehov grundet vækst

Krav om et dual site setup

Page 33: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

33

Co-location – hvorfor?

33

Ændret strategi

Økonomi

Brug dine ressourcer rigtigt

Page 34: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

• Placering i forhold til eksisterende centre

• Tekniske muligheder

• Eget rum

• Tidsplan

• Økonomi

34

Hvorfor Nianet

Page 35: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

• Udarbejd en god krav specifikation

• Vær ærlig omkring (overfor dig selv) vedr. strøm forbrug

• Stil krav til leverandøren.• Undersøg evt. underleverandører

• Lav en audit af leverandørens rutiner

35

Lessons learned

Page 36: Datacenter 2014: Nianet - Per Skovgaard Rosen & Lars Lilja Granberg

Questions

36