IT stojí: núdzový plán pre chod firmy

Núdzový plán IT vopred určuje, kto pri výpadku rozhoduje, ktoré systémy sa v akom poradí znova spustia a ako sa všetci zúčastnení navzájom zastihnú, keď nefunguje ani e-mail a telefónna ústredňa. Bez takého plánu sa z každého výpadku IT stáva aj organizačný problém: nikto si nie je istý, kto smie systém vypnúť, a externý dodávateľ musí sieť najprv sám zisťovať. Základom každého núdzového plánu je aktuálna dokumentácia infraštruktúry.

Kto rozhoduje, keď IT stojí

Prvým a často najviac podceňovaným bodom núdzového plánu je jasné rozdelenie zodpovedností: kto rozhodne o odpojení systému od siete, kto informuje vedenie firmy a kto je oprávnený poveriť externého IT dodávateľa reakciou na incident? Ak táto jasnosť chýba, v prvej hodine incidentu často nastáva zbytočný útlm – nie preto, že by nikto nechcel konať, ale preto, že si nikto nie je istý, či konať smie. Núdzový plán tieto zodpovednosti stanovuje vopred, vrátane jasného zastupovania pre prípad, že príslušná osoba nie je práve dostupná, napríklad počas dovolenky, choroby alebo mimo pracovnej doby.

Ktoré systémy musia bežať ako prvé

Nie každý systém je rovnako kritický, no v zhone počas výpadku sa často rieši najhlučnejší problém namiesto najdôležitejšieho. Priorizácia stanovená vopred tomu zabraňuje: určuje, ktoré systémy pri výpadku okamžite ochromia prevádzku a ktoré môžu krátkodobo počkať bez vážneho ohrozenia chodu firmy. Bez tejto prípravy sa priorita často určuje improvizovane a chaoticky, podľa toho, kto sa práve najhlasnejšie ozve. Zoznam kritických systémov je zároveň dobrým základom na určenie priorít pri investíciách do IT: čo je v núdzi na prvom mieste, si väčšinou ako prvé zaslúži aj rozpočet a pozornosť.

• Určite kritické systémy, ktoré pri výpadku okamžite zastavia prevádzku (napr. skladové hospodárstvo, riadenie výroby, telefónia)
• Pre každý kritický systém zaznamenajte, kto ho prevádzkuje, kde sú prístupové údaje a koho v núdzi kontaktovať
• Zdokumentujte závislosti – napríklad server, ktorý musí bežať skôr, než sa vôbec spustí iný systém
• Poradie krokov obnovy stanovte vopred, namiesto improvizácie v čase núdze

Kontaktné reťazce: prečo „niekomu zavoláme” nestačí

V kritickej chvíli často zlyhávajú presne tie komunikačné cesty, na ktoré sa bežne spoliehate: interný e-mailový systém, IP telefónna ústredňa, spoločný chatovací nástroj. Kontaktný reťazec vopred určuje, kto koho a akou alternatívnou cestou osloví, keď obvyklá cesta nefunguje – a to nielen pre vlastné IT, ale aj pre externých dodávateľov, poisťovňu a prípadne zákazníkov, ktorých treba o poruche informovať bez zbytočného odkladu.

• Udržiavajte aktuálny kontaktný zoznam s alternatívnou dostupnosťou (súkromné mobilné číslo, nielen pracovná linka)
• Kontaktný reťazec majte k dispozícii aj vo fyzickej forme (vytlačený alebo dostupný offline), nielen digitálne na systéme, ktorý práve nefunguje
• Externého IT dodávateľa a jeho dostupnosť mimo pracovnej doby pevne zakotvite v pláne
• Jasne určite, kto v núdzi informuje zákazníkov alebo partnerov, aby sa to nedialo viackrát nekoordinovane

Otestujte núdzový plán skôr, než ho budete potrebovať

Núdzový plán, ktorý existuje iba na papieri, zväčša odhalí svoje medzery práve vtedy, keď už na ich riešenie nie je čas. Pravidelné cvičenie – hoci len hodinová simulácia pri stole, počas ktorej zúčastnení spoločne prejdú celý postup – odhalí presne tie miesta, ktoré v teórii znejú vierohodne, ale v praxi nefungujú: zastarané telefónne číslo, prístup, ktorý už nikto nemá, krok, ktorý čaká na iný krok, ktorý však vôbec nebol zdokumentovaný.

• Aspoň raz ročne uskutočnite simuláciu, aj keby pokrývala len jeden scenár
• Do cvičenia zámerne zaraďte aj výpadok obvyklých komunikačných ciest
• Poznatky z cvičenia skutočne zapracujte do plánu, nielen si ich poznamenajte
• Nových zamestnancov so zodpovednosťou za núdzové situácie aktívne zapojte do plánu aj do ďalšieho cvičenia

Dokumentácia ako predpoklad každého núdzového plánu

Núdzový plán je len taký dobrý, ako dokumentácia, o ktorú sa opiera. Ak okrem jedinej osoby nikto nevie, ako je sieť postavená, kde je uložená ktorá konfigurácia a aké heslo patrí ku ktorému systému, aj ten najlepší plán málo pomôže vo chvíli, keď práve táto osoba nie je v núdzi dostupná. Kompletná a aktuálna dokumentácia infraštruktúry preto nie je samostatná úloha popri núdzovom pláne, ale jeho nevyhnutný základ.

• Udržiavajte aktuálny sieťový plán a prehľad systémov, nielen vytvorený raz pri pôvodnej realizácii
• Prístupové údaje uchovávajte bezpečne, no dostupné pre oprávnené zastupujúce osoby v núdzi
• Zmluvy a kontakty na kritických dodávateľov (internet, hosting, softvér) uchovávajte na jednom centrálnom a známom mieste
• Dokumentáciu aktualizujte po každej väčšej zmene infraštruktúry, nie až pri ďalšom incidente

Núdzový plán ako živý dokument

Núdzový plán, ktorý sa raz vytvorí a potom zabudne v zásuvke, stráca hodnotu vo chvíli, keď sa zmení infraštruktúra – nový server, nový dodávateľ, prestavaná časť siete, a časti plánu už nesedia. Zmysluplný je pevný rytmus, v ktorom sa plán prechádza a porovnáva s aktuálnou infraštruktúrou, doplnený aspoň o hrubé cvičenie toho, ako obnova v praxi skutočne prebieha. Kto plán naviaže na pevný termín v roku, napríklad na plánovanú údržbu, zaistí, že aktualizácia nezostane na náhode a nebude závisieť od toho, či si na ňu niekto práve spomenie. Vďaka tomu zostáva plán v núdzi tým, čím má byť: návodom, ktorý sa dá nasledovať, nie dokumentom, ktorému treba najprv porozumieť a ktorý treba ešte aktualizovať.

Ako s vami NDVDL zostaví núdzový plán a udržiava ho aktuálny

Núdzový plán nevzniká za stolom dodávateľa, ale v rozhovore s ľuďmi, ktorí budú v kritickej chvíli rozhodovať. NDVDL preto príde priamo k vám, zmapuje sieť, servery, prístupy a závislosti a spolu s vami ujasní, ktoré procesy musia po výpadku fungovať ako prvé. Z toho dostanete písomný návrh s rolami, prioritami, poradím obnovy a kontaktným reťazcom – dosť krátky na to, aby si ho v núdzi niekto skutočne prečítal.

Počas bežnej prevádzky udržiavame dokumentáciu aj plán aktuálne vždy, keď sa v infraštruktúre niečo zmení, a v pevných intervaloch ho s vami prejdeme. Máte jednu stálu kontaktnú osobu, ktorá pozná vaše prostredie a v kritickej chvíli nemusí najprv zisťovať, ako je vaša sieť postavená.