Đoạn mã bị bỏ quên làm mất cả gia tài trong 45 phút

Năm 2012, Knight Capital là một trong những công ty giao dịch cổ phiếu Mỹ lớn nhất. Để tham gia một chương trình mới của Sở Giao dịch Chứng khoán New York bắt đầu từ ngày 1/8, công ty cập nhật phần mềm giao dịch. Một kỹ thuật viên chép mã mới lên bảy trong tám máy chủ. Không ai nhận ra chiếc thứ tám bị sót.

Mã mới dùng lại một "công tắc" mà nhiều năm trước từng điều khiển một chức năng cũ tên là Power Peg, không còn dùng từ năm 2003. Trên máy chủ thứ tám, bật công tắc lên lại đánh thức đoạn mã cũ.

Khi thị trường mở cửa, máy chủ đó bắt đầu gửi đi một loạt lệnh ồ ạt. Trong khoảng 45 phút, hệ thống của Knight thực hiện hàng triệu giao dịch trên chừng 150 mã cổ phiếu. Trước giờ mở cửa, các email tự động đã cảnh báo nhân viên về một lỗi, nhưng không ai coi đó là chuyện gấp. Đến lúc ngừng được giao dịch, công ty đã mất khoảng 460 triệu USD, theo Ủy ban Chứng khoán và Giao dịch Hoa Kỳ (SEC).

Knight phải nhận vốn cứu trợ khẩn cấp để tồn tại và bị sáp nhập trong vòng một năm. Năm 2013, SEC cáo buộc công ty vi phạm quy định thị trường về kiểm soát rủi ro, và công ty nộp phạt 12 triệu USD.

SEC thấy Knight không có quy trình bằng văn bản cho việc triển khai mã, không kiểm tra để chắc mọi máy chủ chạy cùng một phiên bản, và không có giới hạn tự động nào dừng giao dịch khi lỗ tăng lớn. Mã cũ không dùng nữa vẫn bị để lại nhiều năm.

Trong lúc khủng hoảng, nhân viên không nhanh chóng tìm ra chuyện gì đang hỏng, và một lần thử sửa còn làm tình hình tệ hơn khi đưa đoạn mã cũ lên cả tám máy chủ. Không có cách đơn giản để dừng mọi thứ cùng lúc, từng phút trôi qua biến thành hàng trăm triệu USD.

Ý tưởng đằng sau vụ nàyBài học: Duyệt bài AI như một người quản lý →

1. 1Dùng danh sách kiểm tra cho mọi thay đổi, và xác nhận thay đổi đã có mặt ở mọi nơi cần có.
2. 2Xóa những thứ cũ không còn dùng, như tệp, tài khoản hay quy trình tự động cũ, để chúng không vô tình sống lại.
3. 3Đặt giới hạn cứng để dừng một quy trình tự động khi có gì bất thường, như hạn mức chi tiêu mỗi ngày.
4. 4Có một nút tắt to, đơn giản và tập dùng nó, để không ai phải loay hoay tìm cách dừng mọi thứ giữa lúc khủng hoảng.