Электронная почта уже давно перестала быть «просто почтой». Она содержит счета, сбросы паролей, согласования и проверки входа в систему, которые открывают доступ к другим сервисам. Поэтому, когда работа Microsoft 365 была нарушена примерно на 24 часа, организации сразу же ощутили последствия.
В период этого простоя более 90 000 клиентов, которые полагаются на безопасность электронной почты Check Point WorkSpace для защиты своих почтовых ящиков, обратились к нам за поддержкой. Вот что мы увидели, что мы сделали, чтобы сохранить их электронную почту в безопасности и обеспечить ее бесперебойную работу, и что мы собираемся улучшить.
Что было нужно нашим клиентам
Когда сообщения не могли быть доставлены в почтовые ящики, мы безопасно удерживали их до возобновления доставки. Наша команда работала круглосуточно, во всех часовых поясах, чтобы гарантировать, что ни одно письмо не будет потеряно и что ни одно письмо не будет доставлено, пока оно не пройдет проверку на безопасность через наши уровни защиты. В результате не было потеряно ни одного письма, и каждое сообщение было проверено на наличие угроз, прежде чем попасть к конечным пользователям.
Трудности — это проверка на устойчивость
Сбой такого масштаба оказывает давление на каждую часть облачной экосистемы. Наши средства защиты продолжали работать в штатном режиме, в то время как это событие подтвердило два важных урока о необходимости дальнейшего повышения устойчивости во все более взаимосвязанном мире.
- Во-первых, сбои могут иметь последствия, выходящие далеко за рамки затронутой платформы. Задержки распространились на более широкую экосистему электронной почты, включая почту, предназначенную для пользователей Gmail, поскольку очереди увеличивались, а доставка замедлялась. Вывод прост: организации не могут предполагать, что сбой, затрагивающий одного облачного провайдера, останется изолированным в рамках этой среды.
- Во-вторых, устойчивость требует способности поглощать неожиданный спрос. По мере роста очередей наша платформа продолжала защищать сообщения, в то время как наша команда DevOps проактивно масштабировала мощности, чтобы справиться с исключительным объемом. Мы продолжаем укреплять эту устойчивость с помощью дополнительной автоматизации и динамического управления мощностями, что еще больше сокращает необходимость оперативного вмешательства во время экстремальных ситуаций.
Злоумышленники следят за сбоями
Сбой создает путаницу, и преступники этим пользуются. После подобных сбоев мы ожидаем появления фальшивых сообщений от службы поддержки, поддельных ссылок для «восстановления», имитации работы службы технической поддержки и мошенничества с платежами. Находясь под давлением необходимости поддерживать работу сотрудников, команды могут поддаться искушению ослабить меры безопасности. Именно на это и рассчитывают злоумышленники.
Что делать сейчас
- Сохраняйте многофакторную аутентификацию и другие средства контроля включенными. Регистрируйте любые экстренные изменения и отменяйте их, как только работа сервиса восстановится.
- Проверяйте каждый сброс пароля, запрос на доступ или запрос на изменение платежных реквизитов по второму каналу связи.
- Предоставьте сотрудникам утвержденный резервный способ связи, чтобы они не переходили на личную электронную почту или приложения.
- Скажите сотрудникам никогда не входить в систему по ссылке из сообщения о «восстановлении».
- После восстановления работы сервиса проверьте входы в систему и административные изменения, внесенные во время сбоя.
Общая картина
Это не первый сбой в этом году. Разрывы подводных кабелей, уязвимость PHP2Shell и крупный сбой в AWS — все это показало одно и то же: слишком много организаций зависят от одних и тех же немногих провайдеров в вопросах электронной почты и проверок личности, которые открывают доступ ко всему остальному.
Устойчивость — это непрерывный инженерный процесс добавления избыточности к критически важным компонентам и анализа поведения каждого компонента при выходе из строя других частей системы. Этот сбой в Microsoft 365 дал нам редкую возможность протестировать систему в таких необычных обстоятельствах.
Присоединяйтесь к нам завтра на живом вебинаре, посвященном недавнему сбою. Мы разберем, что произошло, что мы узнали и что мы меняем, чтобы предотвратить повторение подобного в будущем. Зарегистрироваться сейчас












