Coinbase kaže da je rutinsko infrastrukturno ažuriranje onemogućilo kritični mrežni pristupnik, poremetivši transfere, kupnje debitnom karticom i onchain usluge na oko 50 minuta. Njihovo novo izvješće nakon incidenta objašnjava pogrešku i zašto su ujedno zakazali i uobičajeni alati tvrtke za oporavak.
Coinbase otkriva kako je jedna pogreška u konfiguraciji izazvala 50-minutni prekid rada
NAPISAO
PODIJELI
Ključne poruke
- Coinbase je 50-minutni prekid povezao s neotkrivenim kolizijom naziva Kubernetes resursa tijekom rutinskog infrastrukturnog ažuriranja.
- Incident je poremetio transfere, debitne kupnje Coinbase Card karticom, institucionalne namire i onchain usluge na više platformi.
- Prekid je također onemogućio Coinbaseov uobičajeni proces vraćanja na prethodno stanje (rollback), što je potaknulo nove zaštitne mjere i promjene infrastrukture.
Coinbase objašnjava što je pošlo po zlu
Kripto burza Coinbase (Nasdaq: COIN) identificirala je softversku pogrešku koja stoji iza prošlotjednog prekida zbog kojeg korisnici nisu mogli dovršiti transfere, obavljati kupnje Coinbase Card karticom i pristupati nekoliko onchain usluga oko 50 minuta.
Prema izvješću nakon incidenta objavljenom 21. srpnja, inženjeri su implementirali naizgled rutinsko ažuriranje niskog rizika kada je neotkrivena kolizija naziva Kubernetes resursa uzrokovala da ažuriranje izmijeni pogrešnu mrežnu komponentu.
Coinbase je rekao:
“Ovo je uzrokovano nenamjernom pogrešnom konfiguracijom važne mrežne komponente kao rezultat rutinskog ažuriranja konfiguracije. Ni u jednom trenutku sredstva korisnika nisu bila ugrožena.”
Kubernetes je softver koji Coinbase koristi za organiziranje i pokretanje aplikacija u svojoj cloud infrastrukturi. Kolizija naziva resursa uzrokovala je da ažuriranje promijeni dio Istio ingress gatewaya tvrtke umjesto samo namijenjene komponente. Pristupnik djeluje kao kontrolor prometa, usmjeravajući zahtjeve između Coinbaseovih internih usluga.
Nakon što je pristupnik pao, sustavi zaduženi za obradu trgovanja, transfera, namira i autorizacija plaćanja više nisu mogli komunicirati.
Odbijene kartice i zastali transferi
Poremećaj je zahvatio Coinbaseove maloprodajne, institucionalne i razvojne platforme otprilike od 12:37 ET do 13:25 ET.
Neki maloprodajni korisnici nisu mogli dovršiti uplate, isplate ili transakcije izvan platforme. Transferi koji su već bili u tijeku izgledali su kao da su zapeli, ali su obrađeni nakon povratka usluge. Debitne kupnje Coinbase Card karticom bile su odbijene, dok su kupnje kreditnom karticom nastavile funkcionirati.
Prekid je također prekinuo onchain swapove putem Coinbase DEX-a na Baseu i Solani. Korisnici Coinbase Exchangea i Primea doživjeli su odgođene ili neuspjele transfere i namire, dok korisnici razvojne platforme nisu mogli uključivati korisnike (onboard), premještati sredstva ili koristiti onramp usluge.
Utjecaj naglašava rastuću važnost pouzdanosti dok se Coinbase širi izvan spot trgovanja kriptovalutama. Njegovi planirani proizvodi “everything exchange”, uključujući tokenizirane dionice i perpetual futures ugovore, proširuju raspon financijskih aktivnosti koje ovise o infrastrukturi tvrtke.
Coinbase je zasebno opisao planove da platformu učini širim financijskim čvorištem, s novim uslugama trgovanja, plaćanja i upravljanja novcem koje obuhvaćaju dionice, derivate, plaćanja stablecoinima i alate za razvojne programere. To širenje povećava ulog kada zajednička infrastruktura zakaže.
Zašto je oporavak trajao dulje nego što se očekivalo
Pristupnik je vraćen u 13:20 ET, a Coinbase je incident proglasio ublaženim tri minute kasnije. Preostali zaostaci transakcija raščišćeni su tijekom sljedećih sati.
Oporavak je trajao dulje jer su Coinbaseovi alati za implementaciju ovisili o neispravnom pristupniku. Inženjeri nisu mogli koristiti standardni proces vraćanja na prethodno stanje i umjesto toga su ručno pokrenuli hitnu implementaciju putem cloud pružatelja tvrtke koristeći privremeni privilegirani pristup.
Coinbase sada dodaje provjere za blokiranje konflikata naziva, odvaja alate za oporavak od infrastrukture kojom upravljaju i češće testira postupke hitnog pristupa.
Coinbase je naglasio:
“Naš je cilj uvijek nula zastoja. Aktivno redizajniramo našu infrastrukturu kako bismo osigurali da, u vrlo malo vjerojatnom slučaju još jednog kvara poput ovoga, možemo brzo vratiti promjene i oporaviti se.”
Ovaj je članak preveden s engleskog jezika pomoću umjetne inteligencije. Izvorna engleska verzija mjerodavan je izvor; automatski prijevodi mogu sadržavati netočnosti, osobito u pravnoj i regulatornoj terminologiji.
