Techcombank tranh thủ kỳ nghỉ lễ 30/4–03/5/2020 để chuyển hệ thống sang phiên bản mới. Ngày 04/5, khi giao dịch tăng khoảng 4 lần ngày thường, ngân hàng cho biết phiên bản mới hoạt động không ổn định, khiến khách không vào được ứng dụng và chuyển khoản gặp lỗi. Một ví dụ Việt Nam về kiểm thử tải, kế hoạch quay lui và truyền thông khi nâng cấp hệ thống lõi.
Lần gián đoạn tháng 10/2019 cũng liên quan nâng cấp. Quản lý tri thức dự án yêu cầu đưa bài học vào danh mục kiểm tra trước các lần nâng cấp kế tiếp.
Trước khi chuyển hệ thống trọng yếu sang bản mới, cần ba nhóm tiêu chí:
Đạt kịch bản gấp 4–5 lần ngày thường trên môi trường tương đương sản xuất.
Đã diễn tập quay về phiên bản cũ trong thời gian cam kết, kể cả đồng bộ dữ liệu phát sinh.
Nếu chỉ số ổn định không đạt trong thời gian chạy thử, hoãn chuyển đổi sang kỳ nghỉ sau.
Mở dần cho một nhóm khách hàng nhỏ trước, hoặc giữ hệ thống cũ chạy song song vài ngày, thay vì chuyển tất cả vào đêm cuối kỳ nghỉ.
Lập đội ứng cứu trực tại chỗ ngày đầu sau nghỉ, thông báo trước cho khách về khả năng chậm và các kênh thay thế (tại quầy, tổng đài).
Tổ chức rà soát không đổ lỗi, cập nhật danh mục kiểm tra chuyển đổi và theo dõi hành động cải tiến tới khi hoàn tất.
Thời điểm chuyển đổi cũng là một quyết định rủi ro. Hãy kiểm thử cho đỉnh tải có thể đoán trước, diễn tập quay lui và mở dần cho khách hàng, thay vì đặt cược tất cả vào một đêm.
Bạn chọn phương án nào?