Kakao và đám cháy trung tâm dữ liệu Pangyo (10/2022): hệ thống dự phòng có sẵn nhưng quyền kích hoạt nằm ngay trong toà nhà bị cháy

Ngày 15/10/2022, đám cháy ở phòng pin của trung tâm dữ liệu SK C&C tại Pangyo (Hàn Quốc) làm các dịch vụ của Kakao gián đoạn 127 giờ 30 phút. Kết luận điều tra chính phủ: pin không được tách khỏi hệ thống nguồn dự phòng, hệ thống chữa cháy không phù hợp, và hệ thống dự phòng của Kakao không thể kích hoạt kịp vì cơ chế cấp quyền vẫn nằm ở trung tâm bị cháy. Bài học về khôi phục thảm hoạ và điểm lỗi đơn.

Nguyễn Thu Hà, PMP

24/09/2026

4 phút đọc 0

Bình luận0

Bối cảnh thực tế

Kakao vận hành KakaoTalk, ứng dụng nhắn tin phổ biến nhất Hàn Quốc, cùng nhiều dịch vụ đi kèm. Phần lớn chức năng cốt lõi của Kakao được đặt trong trung tâm dữ liệu Pangyo của SK C&C (tỉnh Gyeonggi), nơi cũng chứa máy chủ của Naver.

Ngày 15/10/2022, một đám cháy bùng lên trong phòng pin ở tầng hầm 3 của trung tâm dữ liệu này. Theo bản điều tra do Bộ Khoa học và ICT, Uỷ ban Truyền thông Hàn Quốc và Cơ quan Phòng cháy chữa cháy quốc gia công bố ngày 6/12/2022, dịch vụ của Kakao bị gián đoạn 127 giờ 30 phút.

Những phát hiện được báo chí Hàn Quốc tóm tắt:

Nguyên nhân cháy chưa được xác nhận chắc chắn, nhưng nhiều khả năng bắt đầu từ pin lithium-ion.
Hệ thống giám sát pin của SK C&C không phát hiện bất thường; trung tâm không có hệ thống chữa cháy phù hợp với đám cháy pin lithium-ion.
Pin nằm cùng phòng với hệ thống nguồn dự phòng nên khi cháy, toàn bộ nguồn của máy chủ, kể cả nguồn dự phòng, bị cắt.
Kakao có hệ thống dự phòng ở trung tâm dữ liệu khác, nhưng quyền kích hoạt chuyển đổi chỉ chạy qua các máy chủ đặt trong trung tâm bị cháy, nên không chuyển kịp.
Naver chỉ bị gián đoạn một phần nhờ có nhiều trung tâm dữ liệu và hệ thống kép.

Co-CEO của Kakao khi đó từ chức sau sự cố; các công ty được yêu cầu trong vòng một tháng đưa ra biện pháp chống tái diễn, và chính phủ dự kiến công bố kế hoạch cải thiện chung vào quý đầu năm sau.

Phân tích nguyên nhân theo chuẩn PMP

Điểm lỗi đơn (single point of failure) không được nhận diện trong sổ đăng ký rủi ro
Dịch vụ cốt lõi tập trung trong một trung tâm dữ liệu là rủi ro có xác suất thấp nhưng tác động cực lớn. Quy trình Nhận diện rủi ro và phân tích định tính phải đặt "mất toàn bộ một địa điểm" vào danh mục, với chủ sở hữu rủi ro ở cấp ban điều hành chứ không chỉ ở đội hạ tầng.
Kế hoạch dự phòng có lỗ hổng phụ thuộc vòng tròn

Kakao và đám cháy trung tâm dữ liệu Pangyo (10/2022): hệ thống dự phòng có sẵn nhưng quyền kích hoạt nằm ngay trong toà nhà bị cháy

Bối cảnh thực tế

Phân tích nguyên nhân theo chuẩn PMP

Điểm lỗi đơn (single point of failure) không được nhận diện trong sổ đăng ký rủi ro

Kế hoạch dự phòng có lỗ hổng phụ thuộc vòng tròn

Rủi ro từ nhà cung cấp (SK C&C) được giao nhưng không được kiểm chứng

Thiếu kế hoạch truyền thông và dự phòng cho người dùng

Lẽ ra PM nên làm gì

Bước 1: Phân hạng dịch vụ và đặt mục tiêu RTO/RPO theo mức quan trọng

Bước 2: Diễn tập khôi phục đầu–cuối với kịch bản "mất cả địa điểm"

Bước 3: Thẩm định và kiểm toán nhà cung cấp hạ tầng

Bước 4: Chuẩn bị sẵn kế hoạch truyền thông và bồi thường

PM Takeaway (Bài học rút ra)

Nguồn tham khảo

Trắc nghiệm tình huống PMP

Nếu ngân sách chỉ cho phép một khoản đầu tư khôi phục thảm hoạ trong năm nay, bạn chọn hướng nào?

Tình huống này hữu ích với bạn?

Bình luận (0)