Sau đợt bảo trì định kỳ dọn dẹp dữ liệu tích luỹ, máy chủ xử lý đơn đặt linh kiện của Toyota dừng vì không đủ dung lượng đĩa. Máy dự phòng chạy cùng hệ thống nên gặp lỗi tương tự, không chuyển sang được. Toàn bộ 14 nhà máy lắp ráp tại Nhật ngừng một ngày. Bài học về rủi ro trong bảo trì và giả định "đã có dự phòng".
Mỗi đợt bảo trì cơ sở dữ liệu có ước tính tài nguyên cần thiết, điều kiện dừng và kế hoạch lùi.
Thiết lập ngưỡng tài nguyên bắt buộc:
Dung lượng trống gấp hai lần ước tính cần dùng: tiến hành.
Dung lượng trống chỉ vừa đủ: mở rộng đĩa trước hoặc chia nhỏ thao tác.
Không ước tính được hoặc thiếu dung lượng: hoãn.
Chỉ bảo trì máy dự phòng sau khi máy chính đã chạy ổn định một thời gian, để luôn có một bên ở trạng thái tốt đã biết.
Bảo trì định kỳ cũng có thể dừng cả một chuỗi sản xuất. Hãy đối xử với nó như một thay đổi có rủi ro, kiểm tra tài nguyên trước khi làm, và đừng để máy chính và dự phòng cùng nhận một thao tác trong cùng một lúc.
Nguồn: Network World — Disk space shortage shuttered Toyota assembly plants (07/09/2023) (mở trong thẻ mới)
Bạn chọn phương án nào?