Văn phòng Quản lý Nhân sự Mỹ (OPM) đưa phiên bản đầu của hệ thống hiện đại hoá xử lý hưu trí vào vận hành tháng 2/2008, phải dừng vào tháng 5, chấm dứt hợp đồng với nhà thầu chính tháng 10 và cuối cùng huỷ chương trình năm 2011. GAO chỉ ra 5 điểm yếu: kế hoạch thiếu phạm vi rõ ràng, ước tính chi phí, EVM, quản lý yêu cầu và kiểm thử.
Tiêu chí 95%/100% trên 132 tình huống là tiêu chí chấp nhận tốt, nhưng chỉ có giá trị nếu kế hoạch kiểm thử, dữ liệu kiểm thử và các ca kiểm thử được xây cùng lúc với yêu cầu. Lập kế hoạch kiểm thử muộn biến tiêu chí chấp nhận thành bất ngờ ở cuối dự án.
Đưa hệ thống vào vận hành dù đã được cảnh báo rủi ro là quyết định đi/không đi (go/no-go) thiếu căn cứ. Quy trình Xác nhận phạm vi phải diễn ra trước khi chuyển giao, không phải sau khi người dùng đã gặp lỗi.
Xác định rõ sản phẩm bàn giao, loại hồ sơ hưu trí được xử lý trong từng giai đoạn, những gì nằm ngoài phạm vi, và chỉ số thành công (thời gian xử lý, tỷ lệ chính xác).
Mỗi quy tắc tính toán là một yêu cầu có ca kiểm thử tương ứng trong ma trận truy vết:
Bộ ca kiểm thử chuẩn do chuyên gia nghiệp vụ của chủ đầu tư xây và ký duyệt trước khi phát triển.
Đạt 100% ở ca trọng yếu và ngưỡng thống nhất ở ca còn lại trong kiểm thử độc lập trước khi vận hành.
Mọi thay đổi quy tắc đi qua kiểm soát thay đổi, cập nhật cả ca kiểm thử và ước tính.
Quyết định đưa vào vận hành phải do bên có thẩm quyền đưa ra dựa trên kết quả kiểm thử chấp nhận và các rủi ro còn mở, có phương án quay lui về quy trình cũ.
Chỉ báo cáo CPI/SPI sau khi đường cơ sở đo lường hiệu suất (performance measurement baseline) được rà soát độc lập.
Khi phạm vi và yêu cầu không được xác định chặt, mọi công cụ kiểm soát khác — EVM, kiểm thử, hợp đồng — đều mất điểm tựa. Hãy viết tiêu chí chấp nhận cùng lúc với yêu cầu, và để kết quả kiểm thử quyết định ngày vận hành.
Bạn chọn phương án nào?