Два дня ИТ-компании провели без интернета, «как-то справляясь». Мы узнали у них, как прошли понедельник и вторник, и главное — как компании оценивают свои потери за эти дни.
В ручном режиме помогали клиентам восстановить доступность сайтов. Иногда результативными были следующие шаги:
- если ресурсы использовали CloudFlare, переключали проксирование на протокол http;
- если это не помогало, отключали CloudFlare, чтобы сайт был доступен по белорусскому IP;
- при выдаче ошибки SSL, переводили ресурс на http. Да, обычно отключение SSL — это не лучший вариант, но в текущих условиях приходилось выбирать лучшее из худшего;
- проверяли с клиентами сайты на наличие на сторонних модулей и ресурсов. Например, скрипты, шрифты, изображения, которые предоставляются зарубежными компаниями: Google, Яндекс, Mail.ru и т. д.
В период с 9 по 12 августа мы потеряли порядка 50% выручки. Но больше всего нас тревожат репутационные потери — прямо сейчас мы наблюдаем серьёзный отток иностранных клиентов. Утраченную выгоду пока не можем выразить в деньгах, но есть основания полагать, что она будет существенной.
Трехдневный шатдаун отразился и на национальной доменной зоне.BY/.БЕЛ.
За три дня было зарегистрировано лишь 49 новых доменов, при этом исключено из реестра — 290. Обычно за аналогичный период в среднем регистрировалось более 210 доменов.
Убытки от простоя ещё не считали. Пока лишь очевидно, что они есть — и прямые, и косвенные. И только лишь с возвращением доступа в интернет убытки не закончились.
Простои были связаны с недоступностью части сервисов, в основном 10 и 11 августа, ущерб присутствует, его размер пока неясен, поскольку мы пытаемся его минимизировать. В бóльшей степени нанесен урон репутации, оценить его в деньгах трудно.
Когда всё началось, расставили приоритеты следующим образом:
- безопасность сотрудников и их моральная поддержка;
- обеспечение доступа к интернету и к необходимым инструментам;
- и только потом — работа в рамках ключевых проектов для тех, кто имел возможность и хотел работать, или же был за границей.
Каждое утро обзваниваем всех ребят, чтобы удостовериться, что все живы, здоровы и в безопасности. Переключились на альтернативный канал онлайн коммуникации. 10 августа мы предложили всем сотрудникам, которые хотят уехать, помощь в выезде за границу: каждый день мы помогаем организовывать и покрываем большую часть расходов на переезд сотрудников, а также оказываем всевозможные консультации. Мы также разделили управленческую команду — c-level менеджеры находятся в разных странах, СЕО компании, Дмитрий Гурский, остаётся в Беларуси.
Никто не знал, как именно будет блокирован доступ в интернет, поэтому ориентировались по ситуации:
- тестировали разные VPN-провайдеры VPN и решения;
- вели работу одновременно по нескольким направлениям и разработали ряд работающих решений;
- помогали с настройкой удалённо по телефону, в офисе или даже приезжали домой (в помощь системным администраторам технически подкованные специалисты оказывали помощь всем остальным);
- разработали чат-бот для Telegram, который помогал получать доступ к интернету;
- получили большую оперативную поддержку от нашего партнёра, Amazon Web Services (AWS): они помогли нам поднять лимиты, обработав наш запрос в течение 15 минут.
Касательно ущерба: мы не занимались пока подсчётом, наши ключевые фокусы сейчас — поддержка и безопасность команды, а также обеспечение стабильной работы продукта по всему миру. Всем остальным мы займёмся позже.
К убыткам можно отнести весь зарплатной фонд, так как работать в такой среде было крайне проблематично. Также огромны репетиционные риски для клиентского направления: приходилось сообщать заказчикам, что мы отрезаны от интернета на непрогнозируемый период.
Рабочий процесс в Минске при этом практически остановился. Мы искали возможные пути решения проблемы, подключали различные VPN-сервисы, но качество интернет-подключения все равно было неудовлетворительным. В связи с этим, большая часть сотрудников работала над задачами, которые не требуют подключения к сети. Мы надеемся, что ситуация нормализуется, и интернет будет работать без перебоев. Это позволит вернуть сотрудников в Минский офис. В противном случае, мы продолжим релоцирование команды.