Coinbase называет сбой «неприемлемым», а генеральный директор взвешивает компромиссы между скоростью и отказоустойчивостью

Армстронг заявляет, что компромиссы в отношении отказоустойчивости будут пересмотрены

Криптовалютная биржа Coinbase (Nasdaq: COIN) объяснила, как сбой системы охлаждения дата-центра AWS вызвал сбой в работе сервиса, который нарушил торговлю, доступ к бирже и данные клиентских счетов на всей платформе. Генеральный директор Coinbase Брайан Армстронг прокомментировал инцидент в X, а руководитель инженерного отдела Роб Витофф подробно описал процесс восстановления и последствия для клиентов.

«Вчера вечером у нас на Coinbase произошел сбой, что недопустимо ни при каких обстоятельствах», — написал Армстронг 8 мая. Он добавил, что большинство систем Coinbase были спроектированы так, чтобы выдерживать простои в одной зоне доступности AWS, но централизованная биржа не отреагировала таким образом во время сбоя. «Можно сделать биржи устойчивыми к сбоям в зонах доступности, но это может привести к нежелательным задержкам, а также нарушить совместное размещение клиентов», — заявил Армстронг, добавив:

«Учитывая этот инцидент, мы пересмотрим эти компромиссы, чтобы обеспечить вам наилучшие условия для торговли. Как минимум, продолжительность сбоя должна быть значительно сокращена, когда требуется переход в другую зону доступности».

Армстронг отметил, что Coinbase пересмотрит, как она балансирует скорость биржи, совместное размещение клиентов и время восстановления после сбоев инфраструктуры. Его комментарии были сосредоточены на уменьшении воздействия и продолжительности будущих сбоев, влияющих на доступ клиентов и торговую деятельность.

Как Coinbase восстановила торговлю и обновления баланса

Руководитель инженерного отдела Coinbase Роб Витофф написал в X, что сбой начался поздно вечером 7 мая, когда внутренние системы начали давать сбои, и аварийные бригады приступили к расследованию. Сбой затронул спотовую торговлю, Prime, International и биржи деривативов. Клиенты также испытывали проблемы с доступом к биржевым услугам, размещением ордеров и просмотром балансов счетов.

Витофф пояснил, что торговля была приостановлена после того, как системы биржи не смогли продолжить безопасную работу во время сбоя инфраструктуры. Он также отметил, что внутренние системы обмена сообщениями работали с задержкой, что привело к задержке отображения некоторой информации о счетах до тех пор, пока процесс восстановления не наверстал упущенное. Он признал:

«Потеря доступа к счету, даже временная, недопустима».

Восстановление осуществлялось поэтапно, а не сразу. Coinbase перенесла затронутые рабочие нагрузки из проблемной зоны, восстановила системы, необходимые для обработки сделок, и позволила задержанным данным клиентов наверстать упущенное. Рынки возобновили работу осторожно, начиная с режима «только отмена», за которым последовали проверки продуктов, аукционный режим, а затем возобновление торговли на бирже Coinbase.