Coinbase Mendedahkan Bagaimana Satu Ralat Konfigurasi Mencetuskan Gangguan Selama 50 Minit

Coinbase Menjelaskan Apa Yang Berlaku

Bursa kripto Coinbase (Nasdaq: COIN) telah mengenal pasti ralat perisian di sebalik gangguan minggu lalu yang menyebabkan pelanggan tidak dapat menyelesaikan pemindahan, membuat pembelian menggunakan Coinbase Card, dan mengakses beberapa perkhidmatan onchain selama kira-kira 50 minit.

Menurut postmortem yang diterbitkan pada 21 Julai, jurutera sedang melaksanakan sesuatu yang kelihatan seperti kemas kini rutin berisiko rendah apabila perlanggaran nama sumber Kubernetes yang tidak dikesan menyebabkan kemas kini itu mengubah komponen rangkaian yang salah.

Coinbase berkata:

“Ini berpunca daripada salah konfigurasi yang tidak disengajakan pada komponen rangkaian penting hasil daripada kemas kini konfigurasi rutin. Pada bila-bila masa pun dana pelanggan tidak berada dalam risiko.”

Kubernetes ialah perisian yang Coinbase gunakan untuk menyusun dan menjalankan aplikasi merentasi infrastruktur awannya. Perlanggaran nama sumber itu menyebabkan kemas kini tersebut mengubah sebahagian daripada gerbang ingress Istio milik syarikat, bukannya hanya komponen yang dimaksudkan. Gerbang itu berfungsi seperti pengawal trafik, mengarahkan permintaan antara perkhidmatan dalaman Coinbase.

Apabila gerbang itu terputus, sistem yang bertanggungjawab memproses dagangan, pemindahan, penyelesaian dan kebenaran pembayaran tidak lagi dapat berkomunikasi.

Kad Ditolak dan Pemindahan Tergendala

Gangguan itu menjejaskan platform runcit, institusi dan pembangun Coinbase dari kira-kira 12:37 tengah hari ET hingga 1:25 tengah hari ET.

Sesetengah pelanggan runcit tidak dapat menyelesaikan deposit, pengeluaran atau transaksi di luar platform. Pemindahan yang sudah berjalan kelihatan tersekat tetapi diproses selepas perkhidmatan kembali pulih. Pembelian debit Coinbase Card ditolak, manakala pembelian kad kredit diteruskan.

Gangguan itu juga memutuskan swap onchain melalui Coinbase DEX di Base dan Solana. Pelanggan Coinbase Exchange dan Prime mengalami pemindahan dan penyelesaian yang tertunda atau gagal, manakala pelanggan platform pembangun tidak dapat mendaftarkan pengguna, memindahkan dana, atau menggunakan perkhidmatan onramp.

Kesan ini menonjolkan kepentingan kebolehpercayaan yang semakin meningkat apabila Coinbase berkembang melangkaui dagangan kripto spot. Produk “everything exchange” yang dirancang, termasuk saham bertoken dan niaga hadapan kekal, sedang meluaskan julat aktiviti kewangan yang bergantung pada infrastruktur syarikat.

Coinbase juga telah menerangkan secara berasingan rancangan untuk menjadikan platform ini hab kewangan yang lebih luas, dengan perkhidmatan baharu dagangan, pembayaran dan pengurusan wang merangkumi saham, derivatif, pembayaran stablecoin dan alat pembangun. Perkembangan itu meningkatkan risiko apabila infrastruktur bersama gagal.

Mengapa Pemulihan Mengambil Masa Lebih Lama Daripada Jangkaan

Gerbang itu dipulihkan pada 1:20 tengah hari ET, dan Coinbase mengisytiharkan insiden itu berjaya dikawal tiga minit kemudian. Baki tunggakan transaksi selesai dibersihkan dalam beberapa jam berikutnya.

Pemulihan mengambil masa lebih lama kerana alat penyebaran (deployment) Coinbase bergantung pada gerbang yang gagal itu. Jurutera tidak dapat menggunakan proses rollback standard dan sebaliknya melancarkan penyebaran kecemasan secara manual melalui penyedia awan syarikat menggunakan akses berkeistimewaan sementara.

Coinbase kini menambah semakan untuk menyekat konflik penamaan, memisahkan alat pemulihan daripada infrastruktur yang diurusnya dan menguji prosedur akses kecemasan dengan lebih kerap.

Coinbase menegaskan:

“Matlamat kami sentiasa masa henti sifar. Kami sedang aktif mereka bentuk semula infrastruktur kami untuk memastikan bahawa, dalam keadaan yang sangat tidak mungkin berlakunya kegagalan lain seperti ini, kami boleh dengan pantas melakukan pemulihan semula dan pulih.”