Tình huống về #Điểm hỏng đơn

Roblox (28–31/10/2021): 73 giờ ngừng dịch vụ vì Consul, BoltDB và hệ thống giám sát phụ thuộc chính thứ đang hỏng

Toàn bộ backend của Roblox dựa trên một cụm Consul duy nhất. Một tính năng streaming mới bật hôm trước cùng một lỗi hiệu năng của BoltDB làm cụm này kiệt sức; vì giám sát cũng phụ thuộc Consul, đội kỹ thuật gần như làm việc trong bóng tối. Nền tảng có khoảng 50 triệu người dùng mỗi ngày ngừng 73 giờ. Bài học về rủi ro điểm hỏng đơn và phụ thuộc vòng.