Coinbase teatas, et rutiinne infrastruktuuri uuendus lülitas välja kriitilise võrguvärava, mis häiris ülekandeid, deebetkaardiga oste ja plokiahela teenuseid umbes 50 minutiks. Ettevõtte uus järelanalüüs selgitab vea põhjuseid ning seda, miks ka ettevõtte tavapärased taastamisvahendid ei toiminud.
Coinbase selgitab, kuidas üks seadistusviga põhjustas 50-minutilise teenuse katkemise
KIRJUTAS
JAGA
Peamised järeldused
- Coinbase tuvastas, et 50-minutilise katkestuse põhjuseks oli rutiinse infrastruktuuri uuendamise käigus avastamata jäänud Kubernetes'i ressursinimede kokkupõrge.
- Intsident häiris ülekandeid, Coinbase Card deebetkaardiga tehtavaid oste, institutsioonilisi arveldusi ja plokiahela teenuseid mitmel platvormil.
- Katkestus blokeeris ka Coinbase’i tavapärase taastamisprotsessi, mis tingis uute turvameetmete ja infrastruktuuri muudatuste rakendamise.
Coinbase selgitab, mis läks valesti
Krüptovaluutabörs Coinbase (Nasdaq: COIN) on tuvastanud tarkvaravea, mis põhjustas eelmise nädala katkestuse, mille tõttu kliendid ei saanud umbes 50 minuti jooksul teha ülekandeid, sooritada oste Coinbase Cardiga ega kasutada mitmeid on-chain-teenuseid.
21. juulil avaldatud järelanalüüsi kohaselt viisid insenerid läbi näiliselt rutiinset ja madala riskiga värskendust, kui avastamata jäänud Kubernetes'i ressursinimede kokkupõrge põhjustas selle, et värskendus muutis valet võrgukomponenti.
Coinbase teatas:
„Selle põhjuseks oli olulise võrgukomponendi tahtmatu valesti konfigureerimine rutiinse konfiguratsiooni värskenduse tulemusena. Kliendi rahalised vahendid ei olnud mingil hetkel ohus.“
Kubernetes on tarkvara, mida Coinbase kasutab rakenduste korraldamiseks ja käitamiseks oma pilveinfrastruktuuris. Ressursinime kokkupõrge põhjustas selle, et värskendus muutis osa ettevõtte Istio sissetuleva liikluse väravast, mitte ainult kavandatud komponenti. Värav toimib nagu liikluskorraldaja, suunates päringuid Coinbase’i siseteenuste vahel.
Kui värav võrgust välja lülitus, ei saanud tehingute, ülekannete, arvelduste ja makseautorisatsioonide töötlemise eest vastutavad süsteemid enam omavahel suhelda.
Kaardimaksed lükati tagasi ja ülekanded seiskusid
Häire mõjutas Coinbase’i jae-, institutsioonilisi ja arendajate platvorme umbes kell 12:37–13:25 (Ida-Ameerika aja järgi).
Mõned jaekliendid ei saanud teha sissemakseid, väljamakseid ega platvormiväliseid tehinguid. Juba käimasolevad ülekanded näisid takerdunud olevat, kuid need töötleti läbi pärast teenuse taastumist. Coinbase'i deebetkaardiga tehtud ostud lükati tagasi, samas kui krediitkaardiga tehtud ostud jätkusid.
Katkestus häiris ka ahelasiseseid vahetustehinguid Coinbase DEX-i kaudu platvormidel Base ja Solana. Coinbase Exchange'i ja Prime'i kliendid kogesid viivitusi või ebaõnnestumisi ülekannete ja arvelduste puhul, samas kui arendajate platvormi kliendid ei saanud kasutajaid registreerida, raha üle kanda ega kasutada sissemakse teenuseid.
See mõju rõhutab usaldusväärsuse kasvavat tähtsust, kuna Coinbase laiendab oma tegevust kaugemale krüptovaluuta hetkekauplemisest. Ettevõtte kavandatavad „kõikehõlmava börsi“ tooted, sealhulgas tokeniseeritud aktsiad ja püsifutuurid, laiendavad ettevõtte infrastruktuurist sõltuvate finantstegevuste valikut.
Coinbase on eraldi kirjeldanud plaane muuta platvorm laiemaks finantskeskuseks, pakkudes uusi kauplemis-, makse- ja rahahaldusteenuseid, mis hõlmavad aktsiaid, tuletisinstrumente, stabiilsete krüptovaluutade makseid ja arendajate tööriistu. Selline laienemine suurendab panuseid, kui ühine infrastruktuur ei tööta.
Miks taastamine võttis oodatust kauem aega
Värav taastati kell 13:20 (ET) ja Coinbase kuulutas kolm minutit hiljem, et intsident on lahendatud. Järelejäänud tehingute kuhjumine likvideeriti järgnevate tundide jooksul.
Taastamine võttis kauem aega, kuna Coinbase’i kasutuselevõtu tööriistad tuginesid rikkis väravale. Insenerid ei saanud kasutada standardset tagasipööramisprotsessi ning käivitasid selle asemel käsitsi hädaolukorra kasutuselevõtu ettevõtte pilveteenuse pakkuja kaudu, kasutades ajutist eripääsu.
Coinbase lisab nüüd kontrollimehhanisme nimekonfliktide vältimiseks, eraldab taastamisvahendid nende hallatavast infrastruktuurist ning testib hädaolukorra juurdepääsuprotseduure regulaarsemalt.
Coinbase rõhutas:
„Meie eesmärk on alati null-seisuaeg. Me kujundame oma infrastruktuuri aktiivselt ümber, et tagada, et sellise rikke äärmiselt ebatõenäolise kordumise korral saaksime olukorra kiiresti taastada.“
See artikkel tõlgiti inglise keelest tehisintellekti abil. Ingliskeelne originaalversioon on autoriteetne allikas; automaatsed tõlked võivad sisaldada ebatäpsusi, eriti juriidilises ja regulatiivses terminoloogias.
