Bez elektriny sa moderná firma ani nepohne. Dokonca aj murár je bez nej ako bez ruky. A čo potom taká prevádzka predaja, tam si ani žuvačku nekúpite, keď nejde elektrina. Ale viete sa pripraviť na vopred ohlásenú výluku z dodávky elektriny? Viete, čo všetko treba urobiť, kým distribučka vypne prúd?

Keď veci fungujú, všetci to považujú za samozrejmé a nezamýšľajú sa nad tým, čo bude, keď sa niečo pokazí alebo keď vypnú prúd. Ľudia si neuvedomujú, čo všetko na elektrinu funguje v ich obchode. A keď je porucha, všetko sa zastaví. Vtedy sa naozaj nedá robiť nič, len čakať, kedy elektrina opäť nabehne a všetko znova pozapínať. Ak je v prevádzke niekto, kto vie, čo všetko treba zapnúť.

Iná situácia by mala byť, keď je vypnutie elektriny na niekoľko hodín vopred avizované dodávateľom elektriny pre plánované práce na vedení alebo transformátore. Žiaľ, nedávno som sa „obšmietal“ okolo situácie, kedy v jednej prevádzke ani netušili, že k niečomu takému dôjde. Len jeden iniciatívny zamestnanec sa dozvedel z mailového hlásenia mestského rozhlasu, že v ich predajni na druhý deň od poludnia do záverečnej nebude elektrina. A tak mail preposlal majiteľovi firmy. Tento firmu kúpil od predchádzajúceho spoločníka a konateľa zhruba pred poldruha rokom.

Hneď prvý problém. Nový majiteľ „zabudol“, že na zmluve o dodávke elektrickej energie je uvedený kontaktný email a telefón na bývalého konateľa, takže ak distribúcia, tak ako má vo zvyku, tridsať dní pred plánovanou odstávkou poslala avízo, prišlo niekomu, koho to už nezaujíma, ak uvedené kontakty vôbec ešte platia. Takže na prípravu na výluku mal majiteľ čas zhruba dvanásť hodín.

Lenže ani tak nič neurobil. Očakávali by ste, že na podobné situácie je dopredu pripravený plán, s ktorým je oboznámený aj vedúci predajne a teraz ho len použije? Chyba. Súčasní mladí manažéri razia zásadu, že problémy sa budú riešiť až vtedy, keď vzniknú, a že všetko sa dá zimprovizovať. Mal som možnosť v niekoľkých zamestnaniach podieľať sa na riešení krízových situácií a preto viem, že v strese môže človek ľahko pozabudnúť na všetky potrebné kroky alebo na ich správne poradie, najmä ak sa vyskytnú nečakané komplikácie, spojené napríklad so zranením človeka. Preto sa na podobné prípady pripravujú plány a postupy, pekne v kľude pri kávičke, kedy má človek čas premýšľať a vymýšľať a precizovať svoj plán, najlepšie so skúseným kolegom či kolegami. Ja som mal to šťastie pracovať so skutočnými profesionálmi v tejto oblasti. A neprestávajú ma preto udivovať súčasní „usmrkanci“, ktorí majú sebavedomie na Gerlachu a skúseností za náprstok.

Takže poďme pekne po poriadku.

Ako každá predajná prevádzka má aj táto počítačové pokladne, tvorené počítačom, monitorom, fiškálnou tlačiarňou bločkov, platobným terminálom. To všetko je spojené počítačovou sieťou, ktorá obsahuje okrem hlavného routra aj ďalší switch s wifi. V sieti je aj server. Takže pred plánovaným začiatkom odstávky je potrebné urobiť dennú uzávierku predaja v počítači aj fiškálnej tlačiarni, keď výluka končí zarovno s koncom predajnej doby, takže už nikto cez deň neurobí žiadny predaj, predajňa bude pre zákazníkov zatvorená. Po uzávierke sa vypnú PC a môže sa vypnúť aj server. Ten sa za bežných okolností vypína tak, že sa na ňom spustí zálohovanie dát na sieťové úložisko a server sa vypne po zálohovaní sám. Otázka znie, ako dlho trvá zálohovanie, teda koľko času vopred pred termínom T je potrebné vykonať uzávierky a spustiť zálohovanie servera, aby sa to stihlo. Prípadne ako dlho je schopný záložný zdroj napájania udržať pod prúdom server aj sieťové úložisko? Na tieto otázky som dostal zhodné odpovede: „Nevieme“.

Súčasne sme sa dozvedeli, že okrem servera je v predajni aj sieťové úložisko. Ak nevieme, ako dlho ho udrží UPS „pri živote“, tak vieme, ako sa vypína? Ja viem, že tieto mašinky bežia na linuxe a strata napájania pre softvér nie je kritická, po obnovení napájania dokážu spoľahlivo nabehnúť. Ale žiadny hardvér nie je „nadšený“, keď sa vypne štýlom výpadku napájania. Pre jeho životnosť a spoľahlivosť je lepšie, keď je vypnutý softvérovo. Ani to nikto nevedel urobiť.

Ukázalo sa, že v obchode je ešte jeden stroj. Server poskytujúci služby smerom von. Rovnako bez informácií o vypínaní. Keď si uvedomíme, že tá malá UPS napája celkom dva servery a jedno úložisko ako aj router a switch, tak je jasné, že po pár minútach bude bez „šťavy“. A zákazníci „tam vonku“ budú mať server so službami nedostupný. Tí budú určite nadšení, o výpadku tržieb nehovoriac.

Takže ak sa s nejakým predstihom vypnú pokladne a server so zálohovaním, po výpadku napájania začne UPS vrešťať tak, že to počuť až na ulici. Trochu znalý zlodej tak bude vedieť, že obchod je bez elektriny a bez personálu. Hotový raj.

Apropo kamerový systém a zabezpečovačka. Na koľko času majú akumulátory tiež nikto nevedel, ani to, či bude poplaško po výpadku elektriny vrešťať alebo pobeží potichu. Ak však vypadne UPS pri serveri, vypadne aj internetové spojenie do predajne a keby aj zabezpečenie ešte chvíľu bežalo, nikomu už o narušení nepovie. Nemá ako.

Ako vidno, v tejto firme je to, že bude v obchode tma, ten najmenší problém, Ešte že tie dvere sú mechanické, na kľučku, tie sa dajú normálne otvoriť a zamknúť kľúčom.

Dá sa to aj lepšie?

Pred pár rokmi som pracoval vo firme, kde som zdedil štyri servery a dva malé 500 VA UPS zdroje. Jeden napájal rack s dvomi veľkými switchmi, ale router a firewall von išli mimo neho. Čo by v podstate ani nebol veľký problém, keby sa do firmy na dva servery neprihlasovali štyri vzdialené prevádzky s doménovým overovaním užívateľov na PC. A keby z ďalšieho nebežali v podstate on-line služby pre tieto prevádzky. Takže výpadok napájania centrály znamenal stop aj pre všetky ostatné prevádzky, hoci tie nemali žiadne problémy s elektrinou.

Po krátkom čase bolo všetko „upratané“ a prepojené a boli zakúpené veľké UPS APC tak, aby každý server mal svoj a konektivita tiež svoj. Vo výsledku tie počítače bežali po výpadku niečo vyše hodiny a pripojenie bolo funkčné dve hodiny. A pripojenia boli dve, jedno optické a druhé vzduchom, samozrejme že prenajaté okruhy, vzhľadom k dôležitosti firmy a jej prevádzky.

Test ohňom na seba nenechal dlho čakať. Do firmy prišiel email s ohlásením plánovanej údržby. Ubezpečil som riaditeľa, že všetko bude v poriadku z hľadiska serverovne a užívateľov notebookov v hlavnej budove a že ostatné prevádzky si nič nevšimnú, ak zaistíme napájanie serverovne elektrickým agregátom do jednej hodiny od začiatku výluky. Riaditeľ si vyžiadal skúšku pripravenosti jeden týždeň pred výlukou a ja, vzhľadom na svoje predchádzajúce skúsenosti, som si nič iné ani nemohol priať.

Oddelenie údržby, ktoré malo v správe aj elektrické agregáty, sme informovali o termíne výluky, aj o termíne testu. V deň testu som ráno o ôsmej hodine zavolal vedúcemu údržby, že test začína. Na jeho poznámku, že sa pozrie, kde má určených ľudí, som mu sucho odvetil, že som v serverovni zhodil hlavný istič a že im beží čas. Pochopil 😉

Onedlho už agregát bežal pod oknom a napájal všetky záložné zdroje, ktoré ťahali svoje servery a konektivitu. Test mal plánované trvanie sedem hodín. Takže bolo počas neho potrebné niekoľkokrát tankovať agregát, nešiel na voľnobeh. Vedeli sme, že môže stáť najviac hodinu, ale iba raz to bolo niečo cez pol hodinu, lebo si chlapi zle zrátali, kedy treba prísť dotankovať.

Test dopadol dobre, žiadna zo služieb pre ľudí v kanceláriách ani na vzdialených prevádzkach nevypadla. A ostrá výluka po týždni prebehla tiež bez problémov, v budove skoro nikto nebol, lebo stolné PC boli bez elektriny a vzdialené prevádzky ani nevedeli, že je nejaký výpadok.

Z testu aj výluky bol spracovaný nový písomný materiál o rizikách a postupe pri výpadku napájania a tiež o postupe v prípade nutnosti opätovného štartu niektorých alebo všetkých serverov. Schválený manuál je k dispozícii pracovníkom IT a bezpečnosti podniku.

Rovnaký test sme potom vykonali aj na druhej najväčšej prevádzke podniku, kde sa ukázali zle zapojené niektoré zariadenia. Test nám umožnil správne zapojenie a doplnenie ďalších UPS ako aj určil zariadenia, ktoré nebudú funkčné v čase kedy agregát bude stáť. Rovnako z tohto testu bol spracovaný manuál pre postup v prípade, že všetko ide podľa plánu, ale aj keď nejde. Je k dispozícii vedeniu prevádzky. Keď bolo na tejto prevádzke plánované vypnutie elektrického prúdu, zúčastnil som sa len ako pozorovateľ toho, či všetci vedia, čo majú robiť, a či to aj robia.

Plán bol pripravený v pokoji a kľude a preto v situácii, kedy treba reagovať, som si mohol vyložiť nohy a pozorovať „cvrkot“ ľudí, od ktorých záleží, aby všetko dopadlo dobre. Nijaká improvizácia v časovom strese. Som stará škola? Nehanbím sa za to.