Inihayag ng Coinbase Kung Paano Nagdulot ang Isang Pagkakamali sa Pagkaka-configure ng 50-Minutong Pagkaantala ng Serbisyo

Ipinapaliwanag ng Coinbase Kung Ano ang Nagkamali

Natukoy ng crypto exchange na Coinbase (Nasdaq: COIN) ang software error sa likod ng outage noong nakaraang linggo na nag-iwan sa mga customer na hindi makakumpleto ng mga transfer, makabili gamit ang Coinbase Card, at ma-access ang ilang onchain na serbisyo sa loob ng humigit-kumulang 50 minuto.

Ayon sa isang postmortem na inilathala noong Hulyo 21, nagde-deploy ang mga engineer ng isang update na tila karaniwan at mababa ang panganib nang magdulot ang isang hindi natukoy na Kubernetes resource name collision na mabago ng update ang maling network component.

Sinabi ng Coinbase:

“Ito ay sanhi ng isang hindi sinasadyang maling configuration ng isang mahalagang network component bilang resulta ng isang karaniwang configuration update. Wala ni isang sandali na nalagay sa panganib ang pondo ng mga customer.”

Ang Kubernetes ay software na ginagamit ng Coinbase upang ayusin at patakbuhin ang mga application sa buong cloud infrastructure nito. Ang resource name collision ay naging dahilan upang mabago ng update ang bahagi ng Istio ingress gateway ng kumpanya sa halip na ang nilalayong component lamang. Ang gateway ay kumikilos na parang traffic controller, na nagdi-direkta ng mga request sa pagitan ng mga internal service ng Coinbase.

Nang mag-offline ang gateway, ang mga system na responsable sa pagproseso ng mga trade, transfer, settlement at payment authorization ay hindi na makapag-ugnayan.

Mga Card na Na-decline at Mga Transfer na Natigil

Naapektuhan ng abala ang retail, institutional at developer platform ng Coinbase mula humigit-kumulang 12:37 p.m. ET hanggang 1:25 p.m. ET.

Ang ilang retail customer ay hindi nakakumpleto ng mga deposit, withdrawal o off-platform na transaksyon. Ang mga transfer na kasalukuyang isinasagawa ay nagmukhang na-stuck ngunit naproseso matapos bumalik ang serbisyo. Na-decline ang mga pagbiling debit gamit ang Coinbase Card, habang nagpatuloy ang mga pagbili gamit ang credit card.

Naantala rin ng outage ang mga onchain swap sa pamamagitan ng Coinbase DEX sa Base at Solana. Ang mga customer ng Coinbase Exchange at Prime ay nakaranas ng mga naantalang o pumalyang transfer at settlement, habang ang mga customer ng developer platform ay hindi makapag-onboard ng mga user, makapaglipat ng pondo, o magamit ang mga onramp service.

Itinatampok ng epekto ang lumalaking kahalagahan ng pagiging maaasahan habang lumalawak ang Coinbase lampas sa spot crypto trading. Ang planado nitong mga produktong “everything exchange”, kabilang ang tokenized stocks at perpetual futures, ay nagpapalawak ng saklaw ng aktibidad pampinansyal na nakaasa sa imprastraktura ng kumpanya.

Hiwalay na inilarawan ng Coinbase ang mga planong gawing mas malawak na financial hub ang platform, na may mga bagong serbisyo para sa trading, payments at pamamahala ng pera na sumasaklaw sa stocks, derivatives, stablecoin payments at developer tools. Pinatataas ng paglawak na iyon ang panganib kapag pumalya ang shared infrastructure.

Bakit Mas Matagal ang Recovery Kaysa sa Inaasahan

Naibalik ang gateway bandang 1:20 p.m. ET, at idineklara ng Coinbase na na-mitigate ang insidente makalipas ang tatlong minuto. Nalinis ang mga natitirang backlog ng transaksyon sa mga sumunod na oras.

Mas tumagal ang recovery dahil ang mga deployment tool ng Coinbase ay nakaasa sa pumalyang gateway. Hindi nagamit ng mga engineer ang karaniwang rollback process at sa halip ay manu-manong naglunsad ng emergency deployment sa pamamagitan ng cloud provider ng kumpanya gamit ang pansamantalang privileged access.

Nagdaragdag na ngayon ang Coinbase ng mga check upang harangin ang mga naming conflict, hinihiwalay ang mga recovery tool mula sa imprastrakturang pinamamahalaan nila, at mas regular na sinusubok ang mga emergency access procedure.

Binigyang-diin ng Coinbase:

“Ang layunin namin ay palaging zero downtime. Aktibo naming muling dinidisenyo ang aming imprastraktura upang matiyak na, sa lubhang hindi malamang na mangyari ang isa pang pagkabigong tulad nito, mabilis kaming makakapag-revert at makakarekober.”