Coinbase Mengungkap Bagaimana Satu Kesalahan Konfigurasi Memicu Gangguan Selama 50 Menit

Coinbase mengatakan pembaruan infrastruktur rutin menonaktifkan gateway jaringan kritis, mengganggu transfer, pembelian dengan kartu debit, dan layanan onchain selama sekitar 50 menit. Postmortem terbarunya menjelaskan kesalahan tersebut dan mengapa alat pemulihan normal perusahaan juga gagal.

Intisari

• Coinbase menelusuri gangguan selama 50 menit itu ke tabrakan nama resource Kubernetes yang tidak terdeteksi, saat pembaruan infrastruktur rutin.
• Insiden itu mengganggu transfer, pembelian debit Coinbase Card, penyelesaian institusional, dan layanan onchain di beberapa platform.
• Gangguan juga menonaktifkan proses rollback normal Coinbase, sehingga mendorong safeguards baru dan perubahan infrastruktur.

Coinbase Menjelaskan Apa yang Salah

Bursa kripto Coinbase (Nasdaq: COIN) telah mengidentifikasi kesalahan perangkat lunak di balik gangguan minggu lalu yang membuat pelanggan tidak bisa menyelesaikan transfer, melakukan pembelian dengan Coinbase Card, dan mengakses beberapa layanan onchain selama sekitar 50 menit.

Menurut postmortem yang dipublikasikan pada 21 Juli, para insinyur sedang menerapkan pembaruan yang tampak rutin dan berisiko rendah ketika tabrakan nama resource Kubernetes yang tidak terdeteksi menyebabkan pembaruan tersebut mengubah komponen jaringan yang salah.

Coinbase mengatakan:

“Ini disebabkan oleh konfigurasi keliru yang tidak disengaja pada komponen jaringan penting sebagai hasil dari pembaruan konfigurasi rutin. Pada tidak satu pun titik dana pelanggan berisiko.”

Kubernetes adalah perangkat lunak yang digunakan Coinbase untuk mengatur dan menjalankan aplikasi di infrastruktur cloud-nya. Tabrakan nama resource menyebabkan pembaruan mengubah sebagian dari Istio ingress gateway perusahaan, alih-alih hanya komponen yang dimaksud. Gateway bertindak seperti pengatur lalu lintas, mengarahkan permintaan di antara layanan internal Coinbase.

Begitu gateway mati, sistem yang bertanggung jawab memproses perdagangan, transfer, penyelesaian, dan otorisasi pembayaran tidak lagi bisa berkomunikasi.

Kartu Ditolak dan Transfer Terhenti

Gangguan itu memengaruhi platform ritel, institusional, dan pengembang Coinbase dari sekitar 12:37 p.m. ET hingga 1:25 p.m. ET.

Beberapa pelanggan ritel tidak dapat menyelesaikan setoran, penarikan, atau transaksi di luar platform. Transfer yang sudah berjalan terlihat seperti macet, tetapi diproses setelah layanan kembali normal. Pembelian debit Coinbase Card ditolak, sementara pembelian kartu kredit tetap berlanjut.

Gangguan tersebut juga menginterupsi swap onchain melalui Coinbase DEX di Base dan Solana. Pelanggan Coinbase Exchange dan Prime mengalami transfer dan penyelesaian yang tertunda atau gagal, sedangkan pelanggan platform pengembang tidak bisa mengonboard pengguna, memindahkan dana, atau menggunakan layanan onramp.

Dampaknya menyoroti pentingnya reliabilitas yang kian meningkat saat Coinbase memperluas layanan di luar perdagangan kripto spot. Produk rencananya “segala jenis bursa,” termasuk saham tokenized dan perpetual futures, memperluas cakupan aktivitas finansial yang bergantung pada infrastruktur perusahaan.

Coinbase telah menjelaskan secara terpisah rencana untuk menjadikan platform sebagai pusat keuangan yang lebih luas, dengan layanan perdagangan, pembayaran, dan manajemen uang baru yang mencakup saham, derivatif, pembayaran stablecoin, serta alat pengembang. Ekspansi tersebut meningkatkan taruhannya ketika infrastruktur bersama gagal.

Mengapa Pemulihan Lebih Lama dari yang Diharapkan

Gateway dipulihkan pada 1:20 p.m. ET, dan Coinbase menyatakan insiden tersebut sudah dimitigasi tiga menit kemudian. Tunggakan transaksi yang tersisa dibersihkan dalam beberapa jam berikutnya.

Pemulihan memakan waktu lebih lama karena alat deployment Coinbase bergantung pada gateway yang gagal. Para insinyur tidak bisa menggunakan proses rollback standar dan malah meluncurkan deployment darurat secara manual melalui penyedia cloud perusahaan dengan akses sementara berhak istimewa (privileged) sementara.

Coinbase kini menambahkan pengecekan untuk mencegah konflik penamaan, memisahkan alat pemulihan dari infrastruktur yang dikelolanya, serta menguji prosedur akses darurat lebih rutin.

Coinbase menekankan:

“Target kami selalu nol waktu henti. Kami sedang melakukan perancangan ulang infrastruktur agar, dalam kejadian yang sangat tidak mungkin seperti kegagalan lain seperti ini, kami dapat dengan cepat melakukan revert dan memulihkan.”