Nguyễn Hoàng✔
Administrator
Một lỗ hổng trong hệ thống của Microsoft đã âm thầm tồn tại suốt bốn tháng trước khi gây ra sự cố gián đoạn dịch vụ trên diện rộng vào tuần trước. Đáng chú ý, chính hệ thống tự động được thiết kế để khôi phục dịch vụ lại vô tình khiến sự cố lan rộng, cho thấy những rủi ro khi doanh nghiệp phụ thuộc quá nhiều vào một nhà cung cấp công nghệ.
Sự cố bắt đầu từ một thao tác phân bổ lưu lượng truy cập thông thường vào tối 11/11, theo giờ New York. Microsoft không nhận ra đầy đủ mức độ nghiêm trọng cho đến 11 giờ 30 phút sáng hôm sau, đúng vào thời điểm các doanh nghiệp Mỹ bước vào giờ cao điểm làm việc.
Ở thời điểm nghiêm trọng nhất, hơn 80% máy chủ phụ trợ của Outlook không phản hồi. Teams cũng gặp trục trặc, khiến nhiều lời mời tham gia cuộc họp trực tuyến biến mất. Một số nhân viên buộc phải chuyển sang gọi điện thoại và sử dụng giấy bút để duy trì công việc.

Vào khoảng 20 giờ ngày 11/11, hệ thống tự động chuyển lưu lượng của Teams sang một nhóm máy chủ khác đang xử lý lưu lượng Outlook. Đây là hoạt động điều phối bình thường nhằm phân bổ tải giữa các máy chủ.
Tuy nhiên, nhóm máy chủ nhận lưu lượng mới lại đang gặp tình trạng thiếu dung lượng do một sự cố độc lập trước đó. Khi lượng truy cập tăng đột biến, máy chủ nhanh chóng cạn bộ nhớ, khiến lỗ hổng tiềm ẩn bị kích hoạt.
Vấn đề không dừng lại ở đó. Microsoft có hệ thống phục hồi thảm họa tự động, được thiết kế để chuyển lưu lượng và email sang những máy chủ khác khi phát hiện hệ thống gặp sự cố.
Nhưng cơ chế này lại vô tình đưa cùng lỗ hổng sang các máy chủ mới. Khi những máy chủ này tiếp tục bị quá tải, sự cố lan rộng theo hiệu ứng domino.
Theo dòng thời gian sự cố được hãng công bố cho khách hàng Microsoft 365, những máy chủ vừa được khôi phục hoạt động lại phải tiếp nhận lượng truy cập tồn đọng rất lớn. Điều này khiến chúng tiếp tục quá tải, buộc hệ thống phải chuyển lưu lượng sang nơi khác.
Quá trình cứ thế lặp lại, tạo thành một vòng luẩn quẩn khiến việc sửa chữa trở nên phức tạp hơn.
Một trở ngại khác là lỗ hổng đã tồn tại từ tháng 7. Vì vậy, những biện pháp xử lý thông thường như khôi phục lại các bản cập nhật gần đây không thể giải quyết triệt để vấn đề.
Microsoft mất khoảng 15 giờ kể từ khi xuất hiện những dấu hiệu bất thường ban đầu để xác định đầy đủ mức độ nghiêm trọng. Sau đó, hãng tiếp tục mất thêm khoảng 15 giờ trước khi bắt đầu triển khai bản vá sửa lỗi.
Thời gian gián đoạn lần này dài hơn đáng kể so với các sự cố dịch vụ tương tự, vốn thường chỉ kéo dài vài giờ.
Charles Lamanna, phó chủ tịch điều hành Microsoft phụ trách phần mềm dành cho môi trường làm việc, cho biết nguyên nhân liên quan đến sự khác biệt giữa môi trường kiểm thử và điều kiện vận hành thực tế.
Trước khi triển khai những thay đổi lớn, Microsoft thường thử nghiệm trong phòng thí nghiệm và trên các mạng lưới quy mô nhỏ. Đây là quy trình tiêu chuẩn của các nhà cung cấp dịch vụ internet lớn nhằm phát hiện những vấn đề có thể ảnh hưởng đến hoạt động hệ thống.
Tuy nhiên, mô hình lưu lượng truy cập và cấu hình phần cứng trong môi trường thử nghiệm không hoàn toàn giống với điều kiện thực tế.
Theo Lamanna, các bài kiểm thử của Microsoft thường tập trung vào những hệ thống cũ hơn, có cấu hình phần cứng yếu hơn, nhằm đánh giá liệu những thay đổi mới có làm trầm trọng thêm các điểm yếu trong kiến trúc hệ thống hay không.
Trớ trêu là lỗ hổng lần này lại gây hậu quả nghiêm trọng hơn trên những máy chủ mới, có cấu hình mạnh hơn. Đây chính là tình huống mà quy trình kiểm thử trước đó đã bỏ sót.
Sau sự cố, Lamanna đã công khai xin lỗi trên nền tảng X vào thứ Hai. Theo thông tin tại thời điểm bài báo được đăng tải, cổ phiếu Microsoft giảm khoảng 1,2% trong phiên giao dịch cùng ngày.
Ngày nay, nhiều công ty sử dụng cùng lúc Outlook để quản lý email, Teams để họp trực tuyến, cùng các dịch vụ đám mây và công cụ Microsoft 365 để xử lý công việc hằng ngày. Khi tất cả những hoạt động này tập trung trong một hệ sinh thái, một sự cố từ nhà cung cấp có thể khiến nhiều bộ phận của doanh nghiệp cùng bị ảnh hưởng.
Điều này đặc biệt đáng lo ngại với những tổ chức phụ thuộc gần như hoàn toàn vào các nền tảng trực tuyến để vận hành.
Điện toán đám mây giúp doanh nghiệp tiết kiệm chi phí, giảm gánh nặng quản lý hạ tầng và dễ dàng mở rộng hoạt động. Nhưng sự tiện lợi đó không đồng nghĩa với việc hệ thống luôn sẵn sàng hoạt động.
Vụ việc của Microsoft một lần nữa cho thấy ngay cả những nhà cung cấp công nghệ lớn nhất cũng không tránh khỏi lỗi hệ thống. Và khi một nền tảng trở thành hạ tầng thiết yếu của hàng triệu người dùng, hậu quả của một lỗi kỹ thuật có thể vượt xa phạm vi của chính công ty cung cấp dịch vụ.
Sự cố bắt đầu từ một thao tác phân bổ lưu lượng truy cập thông thường vào tối 11/11, theo giờ New York. Microsoft không nhận ra đầy đủ mức độ nghiêm trọng cho đến 11 giờ 30 phút sáng hôm sau, đúng vào thời điểm các doanh nghiệp Mỹ bước vào giờ cao điểm làm việc.
Ở thời điểm nghiêm trọng nhất, hơn 80% máy chủ phụ trợ của Outlook không phản hồi. Teams cũng gặp trục trặc, khiến nhiều lời mời tham gia cuộc họp trực tuyến biến mất. Một số nhân viên buộc phải chuyển sang gọi điện thoại và sử dụng giấy bút để duy trì công việc.

Một thao tác chuyển hướng khiến sự cố lan rộng
Theo báo cáo sơ bộ Microsoft gửi khách hàng, lỗ hổng gây ra sự cố đã tồn tại trong trung tâm dữ liệu của hãng từ tháng 7/2026 nhưng không được phát hiện.Vào khoảng 20 giờ ngày 11/11, hệ thống tự động chuyển lưu lượng của Teams sang một nhóm máy chủ khác đang xử lý lưu lượng Outlook. Đây là hoạt động điều phối bình thường nhằm phân bổ tải giữa các máy chủ.
Tuy nhiên, nhóm máy chủ nhận lưu lượng mới lại đang gặp tình trạng thiếu dung lượng do một sự cố độc lập trước đó. Khi lượng truy cập tăng đột biến, máy chủ nhanh chóng cạn bộ nhớ, khiến lỗ hổng tiềm ẩn bị kích hoạt.
Vấn đề không dừng lại ở đó. Microsoft có hệ thống phục hồi thảm họa tự động, được thiết kế để chuyển lưu lượng và email sang những máy chủ khác khi phát hiện hệ thống gặp sự cố.
Nhưng cơ chế này lại vô tình đưa cùng lỗ hổng sang các máy chủ mới. Khi những máy chủ này tiếp tục bị quá tải, sự cố lan rộng theo hiệu ứng domino.
Vì sao Microsoft mất nhiều thời gian để khắc phục?
Một trong những nguyên nhân khiến quá trình khôi phục kéo dài là chính các cơ chế tự động hóa của Microsoft.Theo dòng thời gian sự cố được hãng công bố cho khách hàng Microsoft 365, những máy chủ vừa được khôi phục hoạt động lại phải tiếp nhận lượng truy cập tồn đọng rất lớn. Điều này khiến chúng tiếp tục quá tải, buộc hệ thống phải chuyển lưu lượng sang nơi khác.
Quá trình cứ thế lặp lại, tạo thành một vòng luẩn quẩn khiến việc sửa chữa trở nên phức tạp hơn.
Một trở ngại khác là lỗ hổng đã tồn tại từ tháng 7. Vì vậy, những biện pháp xử lý thông thường như khôi phục lại các bản cập nhật gần đây không thể giải quyết triệt để vấn đề.
Microsoft mất khoảng 15 giờ kể từ khi xuất hiện những dấu hiệu bất thường ban đầu để xác định đầy đủ mức độ nghiêm trọng. Sau đó, hãng tiếp tục mất thêm khoảng 15 giờ trước khi bắt đầu triển khai bản vá sửa lỗi.
Thời gian gián đoạn lần này dài hơn đáng kể so với các sự cố dịch vụ tương tự, vốn thường chỉ kéo dài vài giờ.
Kiểm thử trong phòng thí nghiệm không tái hiện được thực tế
Vậy tại sao một lỗ hổng có thể tồn tại suốt bốn tháng trong hệ thống của một công ty công nghệ lớn như Microsoft mà không bị phát hiện?Charles Lamanna, phó chủ tịch điều hành Microsoft phụ trách phần mềm dành cho môi trường làm việc, cho biết nguyên nhân liên quan đến sự khác biệt giữa môi trường kiểm thử và điều kiện vận hành thực tế.
Trước khi triển khai những thay đổi lớn, Microsoft thường thử nghiệm trong phòng thí nghiệm và trên các mạng lưới quy mô nhỏ. Đây là quy trình tiêu chuẩn của các nhà cung cấp dịch vụ internet lớn nhằm phát hiện những vấn đề có thể ảnh hưởng đến hoạt động hệ thống.
Tuy nhiên, mô hình lưu lượng truy cập và cấu hình phần cứng trong môi trường thử nghiệm không hoàn toàn giống với điều kiện thực tế.
Theo Lamanna, các bài kiểm thử của Microsoft thường tập trung vào những hệ thống cũ hơn, có cấu hình phần cứng yếu hơn, nhằm đánh giá liệu những thay đổi mới có làm trầm trọng thêm các điểm yếu trong kiến trúc hệ thống hay không.
Trớ trêu là lỗ hổng lần này lại gây hậu quả nghiêm trọng hơn trên những máy chủ mới, có cấu hình mạnh hơn. Đây chính là tình huống mà quy trình kiểm thử trước đó đã bỏ sót.
Sau sự cố, Lamanna đã công khai xin lỗi trên nền tảng X vào thứ Hai. Theo thông tin tại thời điểm bài báo được đăng tải, cổ phiếu Microsoft giảm khoảng 1,2% trong phiên giao dịch cùng ngày.
Rủi ro khi doanh nghiệp phụ thuộc vào một nhà cung cấp
Sự cố lần này không chỉ là vấn đề kỹ thuật của Microsoft. Nó còn cho thấy một rủi ro ngày càng lớn trong cách các doanh nghiệp hiện đại vận hành.Ngày nay, nhiều công ty sử dụng cùng lúc Outlook để quản lý email, Teams để họp trực tuyến, cùng các dịch vụ đám mây và công cụ Microsoft 365 để xử lý công việc hằng ngày. Khi tất cả những hoạt động này tập trung trong một hệ sinh thái, một sự cố từ nhà cung cấp có thể khiến nhiều bộ phận của doanh nghiệp cùng bị ảnh hưởng.
Điều này đặc biệt đáng lo ngại với những tổ chức phụ thuộc gần như hoàn toàn vào các nền tảng trực tuyến để vận hành.
Điện toán đám mây giúp doanh nghiệp tiết kiệm chi phí, giảm gánh nặng quản lý hạ tầng và dễ dàng mở rộng hoạt động. Nhưng sự tiện lợi đó không đồng nghĩa với việc hệ thống luôn sẵn sàng hoạt động.
Vụ việc của Microsoft một lần nữa cho thấy ngay cả những nhà cung cấp công nghệ lớn nhất cũng không tránh khỏi lỗi hệ thống. Và khi một nền tảng trở thành hạ tầng thiết yếu của hàng triệu người dùng, hậu quả của một lỗi kỹ thuật có thể vượt xa phạm vi của chính công ty cung cấp dịch vụ.
Được phối hợp thực hiện bởi các chuyên gia của Bkav,
cộng đồng An ninh mạng Việt Nam WhiteHat
và cộng đồng Khoa học công nghệ VnReview