Компаниите от Тексас не са единствените, които може да се наложи да преразгледат непрекъснатостта на бизнеса и плановете си за възстановяване след бедствие след необичайно суровото зимно време в щата.
Прекъсванията на електрозахранването и спуканите тръби, които осакатиха милиони жители и предприятия в Тексас, също се отразиха на компании и държавни агенции в щати, вариращи от Флорида до Калифорния.
Калифорнийският отдел за здравни услуги (DHCS) например потвърди, че неговата информационна система за управление на Medicaid и уебсайтът на Medi-Cal не работят от около 2 часа сутринта на 15 февруари до 6:30 сутринта на 17 февруари поради свързано с времето прекъсване на електрозахранването, засягащо базирания в Далас център за данни на IBM, който ги хоства.
Една от най-големите компании, съобщили за прекъсване, беше State Farm. Застрахователният гигант предупреди клиенти за проблеми със системната свързаност „поради екстремното време“ чрез публикация във Facebook в 14:04 ч. на 15 февруари. Актуализациите през нощта и на следващата сутрин инструктираха клиентите да се свържат чрез директно съобщение до акаунтите на компанията във Facebook или Twitter, ако имат нужда от помощ. В 12:32ч. на 17 февруари публикация във Facebook показва, че по-голямата част от системите на State Farm са възстановени.
State Farm отказа искания за предоставяне на повече информация относно естеството на прекъсването. Въпреки че централата му е в Блумингтън, Илинойс, State Farm изгради основен център за данни и операции в Ричардсън, Тексас, през последното десетилетие, според новинарските доклади на Далас.
Голям Далас разсадник за центрове за данни
Тексас – и особено Далас и общностите на север от града – се превърна в разсадник за центрове за данни и компании за колокация през последните 10 години, отбеляза Боб Гил, вицепрезидент по изследванията в Gartner. Привлеченията включват местоположението в средата на страната, наличието на земя, енергийна и оптична свързаност, благоприятни разпоредби и данъци и липсата на екстремни климатични условия и природни бедствия.
„Все още мисля, че Тексас е добро място за център за данни“, каза Гил. „Извън Хюстън и надолу покрай Персийския залив, Тексас се смята за доста благоприятен от гледна точка на природните бедствия. Те просто се хванаха за това.“
Гил каза, че „сливането на най-лошите сценарии“ се подрежда по едно и също време, за да причини проблеми. Например нехарактерната продължителност на снежна буря над широко разпространена област създаде проблеми с транспорта за предприятия, които зависят от гориво, за да работят с генераторите си.
И все пак Гил каза, че въпреки „продължителната мизерия“ в Тексас, основните доставчици на центрове за данни и компании за колокация, които той покрива, не са му докладвали прекъсвания. Той каза, че телефоните му не звънят без прекъсване при обаждания на клиенти. И неговият съвет за непрекъснатост на бизнеса към тези, които са имали прекъсване, остава същият.
„Ако определено, абсолютно не можете да минете, без този център за данни да не работи, по-добре го копирайте някъде другаде“, каза Гил. „Трябва да имаме широко отворени очи от гледна точка на непрекъснатостта на бизнеса в цялата страна и трябва да сме многорегионални.“
Прекъсването на електрозахранването в Тексас осветява рисковия фактор
Един потенциален рисков фактор, който е уникален за много части на Тексас, е неговата независима, приватизирана електрическа мрежа, която минусовите температури този месец доведоха до ръба на колапса. Съветът за електрическа надеждност на Тексас (ERCOT) нареди прекъсвания на електрозахранването, за да се предотврати пълно спиране на тока. Петима членове на борда на ERCOT подадоха оставка тази седмица заради запитвания относно подготовката на мрежата за зимни условия.
Старшият анализатор на Forrester Research Брент Елис каза, че град Ел Пасо може да послужи като потенциален модел за ERCOT. Ел Пасо беше пощаден от масивните прекъсвания, които засегнаха голяма част от Тексас, тъй като получава електричество чрез мрежа на западната връзка, която включва други западни щати, северозападно Мексико и две канадски провинции. Елис каза, че ERCOT трябва да обмисли връзки с други мрежи в Северна Америка, тъй като усилията за зимуване могат да се окажат проблематични в Тексас.
„Те имат много по-малки производствени съоръжения там, които ще трябва да отделят парите, за да извършат подготовката за зимата, и това се отразява на това колко таксуват на клиентите за тяхната електроенергия“, каза Елис. „Има определен момент, в който не можете да таксувате на хората много повече пари, без клиентите да се преместят или да решат да не използват толкова много електроенергия.“
Елис очаква, че големите технологични компании, които вече са базирани в Тексас, като Dell, и тези, които планират да преместят централите си в Тексас, включително Hewlett Packard Enterprise и Oracle, ще имат сериозни дискусии със законодателите в Тексас, за да се справят с проблемите с захранването.
„Тексас се опитва да покани индустрията да има повече работни места и повече пари в щата. Те не искат да се превърнат в Калифорния. Те искат да останат приватизирани и дерегулирани“, каза Елис. „Но ако искат да могат да забавляват света на високите технологии, има неща, с които ще трябва да се справят като държава. Те ще видят, че технологичният бизнес напуска, вместо да се мести там, ако не могат да осигурят стабилна среда за работа."
Планирането на непрекъснатостта на бизнеса в много щати
DHCS се изправи пред проверка за това как екстремните метеорологични условия в Тексас могат да повлияят на услугите на Medicaid на западния бряг. DHCS управлява свой собствен център за данни в Сакраменто, Калифорния, но също така наема или притежава оборудване в съоръжения в Колорадо, Кънектикът, Охайо, Орегон, Пенсилвания, Тексас, Вирджиния и Вашингтон за хостване на услуги, системи и данни, според Карол Слоун, служител по обществена информация на отдела.
Слоун каза, че DHCS не планира големи промени в стратегията си за непрекъснатост на бизнеса след прекъсването на системата в Тексас, тъй като отделът рутинно се стреми да подобри времето за работа на системата, да изгради излишъци в различни местоположения и да увеличи целите за време за възстановяване. DHCS оценява и мигрира приложения към доставчици на облачни услуги, като AWS, и изгражда непрекъснато модерни приложения, базирани на облак, каза тя.
В отговор на прекъсването на своя център за данни в Далас, IBM издаде следното изявление: „Нашите съоръжения в Тексас издържаха на същото екстремно време, на което се сблъскаха други бизнеси в щата. Работихме усърдно, за да преодолеем предизвикателствата на минусовите температури и непрекъснатите прекъсвания на електрозахранването възстановяване на услуги за нашите клиенти."
Друга нетексаска организация, претърпяла прекъсване на онлайн услугата поради проблем с доставчик на център за данни в Далас, обеща на клиентите „мащабно разследване“ на основната причина за инцидента. Availity, която управлява мрежа за здравна информация за улесняване на електронни транзакции и сътрудничество и е базирана в Джаксънвил, Флорида, каза, че прекъсването на 16 февруари е резултат от повреда на електрическото превключване в неговия център за данни в Далас. Availity отказа да посочи името на доставчика поради опасения за сигурността и поверителността.
Анатомия на прекъсването
Главният оперативен директор на Availity Пол Джойнър каза, че постоянните прекъсвания на електрозахранването са наложили центърът за данни да преминава напред-назад от електрическа мрежа към енергия от генератор. Доставчикът на центъра за данни успешно се прехвърли в часовете преди инцидента, но повреда между резервни превключватели на равнината на управление причини загуба на захранване на веригите към оборудването на Availity. Въпреки че доставчикът възстанови захранването в рамките на един час, Availity забеляза, че приложенията, обърнати към клиента, са офлайн.
„Когато има внезапна и пълна загуба на захранване, това увеличава риска от повреда на компоненти и изисква обширна ръчна намеса и отстраняване на неизправности“, каза Джойнър. „В тази ситуация загубихме достъп до равнината за управление на мрежата, която позволява на инженерите да имат достъп, да наблюдават и управляват свързани устройства.“
Членовете на екипа решиха, че с възстановено и стабилно захранване най-бързият път за възстановяване ще бъде да активират сайта в Далас, вместо да превключат към своя вторичен център за данни в Атланта. Системите на Availity бяха отново онлайн около 17:30 часа. на 16 фев.
„В резултат на този инцидент ние проучваме редица хора, процеси и възможности за подобряване на технологиите“, каза Джойнър. „Очакваме пълните резултати от това разследване да доведат до нови практики, които ще ни помогнат да избегнем подобни проблеми в бъдеще.“