部署到八分之七的伺服器導致損失 4.6 億美元。費時 45 分鐘。
2012 年 8 月 1 日,美國東部時間上午 9:30:騎士資本 (Knight Capital) 是美國股票交易總量約十分之一的做市商,剛將新的訂單路由代碼部署到其八台 SMARS 伺服器中的七台。
2012 年 8 月 1 日,美國東部時間上午 9:30:騎士資本 (Knight Capital) 是美國股票交易總量約十分之一的做市商,剛將新的訂單路由代碼部署到其八台 SMARS 伺服器中的七台。第八台伺服器仍然運行 2003 年已淘汰的「Power Peg」代碼,位於新功能重複使用的相同標誌之後。在 45 分鐘內,它發送了永不停止的子訂單:400 萬次執行,3.97 億股,約 70 億美元的倉位,造成 4.6 億美元的損失。開市前已收到 97 封警告電子郵件。事後分析,根據美國證券交易委員會自己的命令:沒有人審查的手動部署、具有兩種含義的標誌、2005 年移動但從未重新測試的停止計數器、不存在的終止開關,以及在即時市場中使情況更糟的「修復」。對修復的判決:REVERT。
本影片重點
- 2012 年 7 月 27 日至 31 日:RLP 代碼手動複製到 8 台 SMARS 伺服器中的 7 台;沒有第二個審查員,沒有書面程序
- 8 月 1 日,上午 8:01:開市前收到 97 封「Power Peg 已禁用」電子郵件;未設計為警報,未閱讀
- 8 月 1 日,上午 9:30 至 10:15:212 筆訂單在 154 支股票中產生 400 萬次執行;35 億美元多頭,31.5 億美元空頭;損失 4.6 億美元;解除安裝新代碼使情況更糟
- 8 月 2 日至 12 月 19 日:股價下跌 63% 至 2.58 美元,以每股 1.50 美元獲得 4 億美元的救助,與 GETCO 合併;2013 年 10 月:被 SEC 罰款 1,200 萬美元,首宗市場准入規則案例
問題與解答
2012 年 8 月騎士資本交易損失的原因是什麼?
騎士資本手動將新的訂單路由代碼部署到其八台 SMARS 伺服器中的七台。第八台伺服器仍然運行 Power Peg,這是 2003 年已淘汰的代碼,位於新功能重複使用的相同標誌之後。根據 SEC 命令,它為 212 個客戶訂單發送子訂單並且永不停止,在大約 45 分鐘內產生了 400 萬次執行和 3.97 億股股票,導致 4.6 億美元的損失。
為什麼新代碼重複使用舊功能標誌是危險的?
相同的標誌值在不同的伺服器上會意味著兩種不同的事物。在騎士的案例中,新功能重複使用了 Power Peg 的舊標誌,因此相同的設定在七台伺服器上啟用了新行為,而在第八台伺服器上啟用了已停用的 Power Peg 代碼。Power Peg 的停止計數器也曾在 2005 年被移動且從未重新測試,因此已停用的代碼永遠循環。
為什麼警告或控制未能及早阻止騎士資本的失控訂單?
開市前收到 97 封內容為 Power Peg 已禁用的電子郵件,但它們並非設計為警報,且無人閱讀。沒有任何東西將發出的訂單與收到的訂單進行比較,也沒有終止開關。風險監控器是一個由人類監控的螢幕,它沒有顯示限制。工程師從七台正常的伺服器中解除安裝了新代碼,這使得 Power Peg 在所有地方都開啟了。
2012 年交易故障後,騎士資本發生了什麼事?
股價下跌 63% 至 2.58 美元,騎士以每股 1.50 美元獲得了 4 億美元的救助。它同意在 2012 年聖誕節前與 GETCO 合併。2013 年,美國證券交易委員會在第一起市場准入規則案件中對騎士處以 1,200 萬美元罰款,並在事件發生約十四個月後自行撰寫了事後分析。
騎士資本事件後,工程團隊應該做出哪些改變?
The Daily Diff 的判決是 REVERT。該事件的改變是為每個新功能提供一個新標誌,刪除死代碼而不是禁用它,並為任何發送訂單的東西提供一個關閉開關。它還指出騎士從未撰寫自己的事後分析。美國證券交易委員會做到了,而且手動部署沒有第二個審閱者,也沒有書面程序。
翻譯文字稿
譯自英文原版旁白。可用的音訊和字幕由 YouTube 控制。
0:00 一家交易公司將新代碼部署到八台伺服器中的七台, 而第八台在 四十五分鐘內買賣了近七十億美元的股票,即使在星期三,這也是一個很大的數字。 2012 年 8 月 1 日。 騎士資本,美國所有股票交易的十分之一, 報告損失 4.4 億美元。 美國證券交易委員會後來統計超過 4.6 億美元,對騎士處以 1,200 萬美元罰款, 並親自撰寫了事後分析:十頁,零形容詞。
0:25 它是如何發生的,為什麼會發生,以及誰應該受到指責。 這裡是 The Daily Diff,事後分析。 7 月 27 日。紐約證券交易所於 8 月 1 日啟動零售流動性計劃,因此騎士將新代碼手動複製到其訂單路由器 SMARS 上, 每天複製幾台伺服器。 一名技術人員,八台伺服器,七份副本。 沒有人檢查;沒有規定必須檢查。 上午 8:01。一個內部系統開始向員工發送一封錯誤電子郵件,內容為:Power
0:51 Peg 已禁用。開市前有 97 封電子郵件。 它們不是設計為警報,所以沒有人閱讀它們, 這是一個代價不菲的設計決策。 9:30,市場開盤。 七台伺服器運行新代碼。 第八台看到相同的標誌並運行 Power Peg:騎士於 2003 年停用但從未刪除的代碼。 它為 212 個客戶訂單發送子訂單,並且永不停止。
1:13 四百萬次執行。 3.97 億股。 一個持有帳戶膨脹超過其兩百萬美元的限制, 這並沒有連接到任何東西。 工程師在即時市場中,從七台正常的伺服器中解除安裝了新代碼, 這使得 Power Peg 在所有地方都開啟了。 大約 10:15 停止:三點五億多頭, 三點一五億空頭。
1:31 一:Power Peg 的停止條件,即表示父訂單已 完成的計數器,於 2005 年被移動且從未重新測試,因此已停用的代碼 永遠循環。二:新功能重複使用 Power Peg 的舊標誌, 因此相同的「是」在兩台伺服器上意味著兩件事。 三:沒有終止開關。 沒有任何東西將發出的訂單與收到的訂單進行比較;沒有任何東西停止 SMARS。 風險監控器是一個由人類監控的螢幕;它沒有顯示限制。 git blame:重複使用標誌而不是使用新標誌,死代碼可呼叫九
2:00 年,以及沒有第二雙眼睛的手動部署。 不是技術人員。 SEC 命令從未提及他,我也不會提及。 影響範圍:4.6 億美元,大約每分鐘一千萬美元。 股價下跌 63% 至 2.58 美元,以每股 1.50 美元獲得 4 億美元的救助, 在聖誕節前與 Getco 合併。 Hacker News,星期四:它是如何運行 45 分鐘而沒有人介入的? 它沒有。人類使情況變得更糟。
2:25 事後分析判決:REVERT。 騎士從未撰寫自己的事後分析;監管機構在 十四個月後撰寫,而解決方案是罰款和合併。 星期一:新功能,新標誌;死代碼被刪除, 而不是禁用;任何發送訂單的東西都應該有開關。 在評論中或透過 the daily diff dot dev,向我發送您仍然不允許談論的事件。 在評論中,或透過 the daily diff dot dev,向我發送您仍然不允許談論的事件。 這就是今天的差異。
2:48 我是 Axrisi 的 Niko。 負責地合併。
來源
- SEC Administrative Order, Release No. 34-70694 (Oct 16, 2013), In the Matter of Knight Capital Americas LLCwww.sec.gov
- SEC press release 2013-222, "SEC Charges Knight Capital With Violations of Market Access Rule"www.sec.gov
- Knight Capital Group 8-K, Aug 2, 2012 (the $440M statement)www.sec.gov
- Knight Capital Group 8-K, Aug 6, 2012 (the $400M convertible preferred)www.sec.gov
- Knight / GETCO merger announcement, Dec 19, 2012www.sec.gov
- NYT DealBook, "Knight Capital Says Trading Glitch Cost It $440 Million" (Aug 2, 2012)archive.nytimes.com
- Hacker News, Aug 2, 2012 (73 points)news.ycombinator.com
- Hacker News, "The $440M software error at Knight Capital" (294 points)news.ycombinator.com



