LPS:Prohlídka serverovny

Z HelpDesk


Pár tipů co vykládat zájemcům o prohlídku serverovny. Nemělo by tu být nic tajného.

Napájení

  • z energocentra - serverovna je nezávislá na této budově, používá se pro
    • UI420
    • UL011
    • UL008 (částečně)
    • menzu
  • energocentrum vlastní diesel agregat s bateriemi, napájen ze 2 větví rozvodné sítě
    • nadrz 1000 l nafty
    • 200l/h spotreba
  • baterie mají za úkol udržet serverovnu pod napětím dokud se nerozběhne diesel (do 2min)
  • z energocentra zásobována ještě menza, ale bez baterií, tzn. vznikne max. 2min výpadek, to ale při vaření nevadí
  • příkony:
    • maximální z baterií: XXXX kWh
    • maximální dieselu: YYYY kWh
    • aktuální potřeba serverovny v UI: ZZZZZ kWh

Chlazení

  • odebíráme chlad z energocentra (budova mezi UF a NTIS)
  • vzduch je nasáván jednotkami zvrchu a tlačen pod podlahu
  • projde podlahou před servery které si jej natáhnou dovnitř, ohřejou a vypustí vzadu odkud je opět natáhnou chladící jednotky
  • jednotky obsahují filtry (mění se cca 1x ročně) a regulují také vlhkost v místnosti

UI420

  • levnější řešení s minimální kotrolou proudění vzduchu
  • racky se servery a poli uloženy blíže k chladícím jednotkám
  • síťové prvky (neprodukují tolik tepla) umístěny dále od jednotek

UI419 (HD část)

  • řešení teplé a studené uličky
  • efektivnější využití chlazení, racky možno osadit tepelně výraznějším HW
  • nutné utěsnit nepoužívané části
  • vhodné pro náročné aplikace

UL011

  • rack se samostatným chlazením
  • systém teplé/studené uličky je integrovám přímo do racku (vlastně malá serverovna ve skříni, obsahuje tepelný výměník, větráky, filtry a řízení chlazení i samotné servery)
  • riziko, že při výpadku přísunu chladu (např. výpadek oběhového čerpadla) se rychle přehřeje (jednotky minut), servery mají ochranu na zdroji a většinou server vypnou při překročení 70 stupňů
  • řešením je automatické otevření dveří racku do místnosti v případě překročení teploty

Hasící systém

  • nezávislý systém řízení hašení
  • při spuštění poplachu krátký čas (cca 20-30sec) na opuštění místnosti, jinak je nutné v místnosti počkat do uhašení a vychladnutí požáru (minimálně 30min)
  • červené bomby jsou dimenzované (v každé místnosti jiný počet) právě tak, aby z místnosti vytlačily vzduch a tím klesla úroveň kyslíku tak, aby oheň již nehořel, proto nesmí být místnost otevřena po spuštění hašení
  • bomby se uvolňují postupně do celé místnosti kovovým potrubím, vždy se pustí další bomba pokud dojde tlak v přechozí, první bombu odjišťuje "patrona" ovládaná autonomním hasícím systémem
  • v bombách je směs plynu (složení viz cedulka na vstupních dveřích), která člověku umožní přežít - zrychlí se tep a dýchání, je to obdobné jako se ocitnout ve velmi vysoké nadmořské výšce, následky jsou pak bolest hlavy, malátnost, ...
  • bomby samozřejmě nedokáží vytlačit všechen kyslík, ale vytlačí jej tak, aby oheň něměl dostatek kyslíku pro další hoření (bude udušen) a člověk v tomto prostředí krátkodobě přežil
  • čidla jsou umístěny na stropě i pod podlahou a jsou zde dva vyhodnocovací systémy (klasické čidla + průběžné nasávání vzduchu a jeho vyhodnocování, viz plastové potrubí)
  • pro spuštění hašení je třeba oznámení o požáru alespoň od dvou čidel (z důvodu možné poruchy)
  • cena náplně jedné bomby je cca 10.000,- Kč

Síť

Konektivita

  • 2x 10Gb do CESNETU
  • 3x zaloha 10Gb (ui, ul, fel)
  • nemame jinyho providera

Zbytek

  • 100Gb po Borech
  • Analyzator + FW
    • zvlada filtrovat 160Gb/s (nejsilnejsi v CR)
  • 2 VPN Koncentratory
  • Wireless LAN kontrolery
    • AP jsou napojeny centalne pro automaticke konfigurace, ladeni kanalu...
    • po univerzite je rozmisteno skoro 800 AP (nectiny, cheb, mesto, kampus)
  • CESNET rack
    • router (2x 10Gb)
      • linka do budejic, praha, cheb
      • mame klienty cesnetu pripojene pres zcu (nemocnice, skoly)
    • DWDM - dela ze svetla duhu (multiplex)
  • switche mame zapojeny jako jeden v HA
    • extendery (porty) v rackach

Pole

Provoz

  • pul pole ui420, pul v ul008
    • propojene pres fc (24 vlaken)
    • mirror nebo kopie
  • napojeni pres fibre channel (SAN) (48 vlaken)
    • alternativa napojeni pres nfs (10GE) po sitove infrastrukture
  • velke pomale disky + rychle disky (disky jsou specialni za ~40.000)

Backup

  • velke pomale disky
  • cca 750T
  • zalohy denni/mesicni

Servery

  • Ruzni vyrobci (Dell, HP, Supermicro)
  • OS Linux/Windows
  • KVM prepinace

Služby

  • Mail
  • Cloud
  • Databaze (Oracle)