+− THE DAILY DIFFdev & AI news
REVERT

8 сервердин 7ине жайылтылган жаңыртуу $460 миллион жоготууга алып келди. 45 мүнөт.

2012-жылдын 1-августу, саат 9:30, ET: Knight Capital, АКШ биржалык соодасынын болжол менен ондон бир бөлүгүн түзгөн рыноктук жаратуучу, өзүнүн сегиз SMARS серверинин жетөөсүнө жаңы заказ багыттоо кодун жайгаштырды.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

2012-жылдын 1-августу, саат 9:30, ET: Knight Capital, АКШ биржалык соодасынын болжол менен ондон бир бөлүгүн түзгөн рыноктук жаратуучу, өзүнүн сегиз SMARS серверинин жетөөсүнө жаңы заказ багыттоо кодун жайгаштырды. Сегизинчиси "Power Peg" деген эскирген (2003-жылы колдонуудан алынган) кодду иштетип жаткан, ошол эле желектин артында жаңы функция кайра колдонулган. 45 мүнөт бою ал эч качан токтобогон балдардын заказдарын жөнөттү: 4 миллион аткаруу, 397 миллион акция, болжол менен 7 миллиард долларлык позициялар, 460 миллион доллар жоготуу. Ачылганга чейин 97 эскертүүчү электрондук кат келген. Постмортем, SECтин өз буйругунан: эч ким карабаган кол менен жайгаштыруу, эки мааниси бар желек, 2005-жылы жылдырылып, кайра текшерилбеген токтотуу эсептегичи, жок болгон өчүрүү которгучу жана жандуу рынокто аны ого бетер начарлаткан "оңдоо". Оңдоого өкүм: REVERT.

Жазма басылышын окуу (Англисче) ↗

Бул видео эмнелерди камтыйт

  • 2012-жылдын 27-31-июлу: RLP коду кол менен 8 SMARS серверинин 7сине көчүрүлгөн; экинчи текшерүүчү жок, жазуу жүзүндөгү процедура жок
  • 1-август, саат 8:01: Ачылганга чейин 97 "Power Peg өчүрүлдү" электрондук каты; эскертүүлөр катары иштелип чыккан эмес, окулган эмес
  • 1-август, 9:30–10:15: 212 заказ 154 акцияда 4M аткарууга айланды; 3,5 миллиард доллар узун, 3,15 миллиард доллар кыска; 460 миллион доллар жоготулду; жаңы кодду орнотуу аны ого бетер начарлатты
  • 2-август – 19-декабрь: акциялар -63% 2,58 долларга чейин, 1,50 доллар/акция боюнча 400 миллион доллар куткаруу, GETCO менен биригүү; 2013-жылдын октябры: 12 миллион доллар SEC айып, биринчи Market Access Rule иши

Суроолор жана жооптор

2012-жылдын августунда Knight Capital соода жоготуусуна эмне себеп болгон?

Knight Capital өзүнүн сегиз SMARS серверинин жетөөсүнө жаңы заказды багыттоо кодун кол менен жайгаштырган. Сегизинчиси 2003-жылы иштебей калган Power Peg кодун жаңы функция кайра колдонгон ошол эле желектин артында иштетип жаткан. SEC буйругуна ылайык, ал 212 кардар заказы үчүн бала заказдарды жөнөтүп, эч качан токтогон эмес, натыйжада 45 мүнөттүн ичинде 4 миллион аткаруу жана 397 миллион акция пайда болуп, 460 миллион доллар жоготууга учураган.

www.sec.gov · www.sec.gov

Эски функция желегин жаңы код үчүн кайра колдонуу эмне үчүн кооптуу?

Бир эле желектин мааниси ар кандай серверлерде эки башка нерсени билдирет. Knightтин учурунда жаңы функция Power Pegтин эски желегин кайра колдонгон, ошондуктан ошол эле жөндөө жети серверде жаңы жүрүм-турумду жана сегизинчисинде иштебей калган Power Peg кодун иштеткен. Power Pegтин токтотуу эсептегичи да 2005-жылы жылдырылып, эч качан кайра сыналган эмес, ошондуктан иштебей калган код түбөлүккө кайталана берген.

www.sec.gov

Эмне үчүн эскертүүлөр же көзөмөл Knight Capitalдин башкаруудан чыккан буйруктарын эртерээк токтоткон жок?

Power Peg өчүрүлгөн 97 электрондук кат ачылганга чейин келген, бирок алар эскертүү катары иштелип чыккан эмес жана эч ким окуган эмес. Кирген заказдар менен чыккан заказдардын ортосунда эч нерсе салыштырылган эмес жана өчүрүү которгучу болгон эмес. Тобокелдик монитору адамдар көз салган экран болчу, ал чектөөлөрдү көрсөткөн эмес. Инженерлер жаңы кодду жети жакшы серверден чыгарып салышкан, бул Power Pegти бардык жерде күйгүзгөн.

www.sec.gov · www.sec.gov

2012-жылдагы соода катасынан кийин Knight Capitalге эмне болду?

Акциялар 63%га төмөндөп, 2,58 долларга жеткен, жана Knight 400 миллион долларлык куткарууну акциясы 1,50 доллардан алган. Ал 2012-жылдын Рождествосуна чейин GETCO менен биригүүгө макул болгон. 2013-жылы SEC Knightке өзүнүн биринчи Рынокко кирүү эрежеси боюнча ишинде 12 миллион доллар айып салган жана инциденттен он төрт ай өткөндөн кийин өзү постмортем жазган.

www.sec.gov · www.sec.gov · www.sec.gov

Knight Capital окуясынан кийин инженердик командалар эмнени өзгөртүшү керек?

The Daily Diffтин өкүмү REVERT болгон. Эпизоддун өзгөрүүлөрү ар бир жаңы функцияга жаңы желек берүү, өчүрүлгөн кодду өчүрүүнүн ордуна жок кылуу жана заказдарды жөнөткөн нерсеге өчүрүү которгучун берүү. Ал ошондой эле Knight эч качан өзүнүн постмортемин жазбаганын белгиледи. SEC жасаган, жана кол менен жайгаштырууда экинчи кароочу жана жазуу жүзүндөгү жол-жобо болгон эмес.

www.sec.gov · www.sec.gov

Котормо стенограмма

Англис тилиндеги баштапкы баяндамадан которулган. Жеткиликтүү аудио жана коштомо жазуулар YouTube тарабынан көзөмөлдөнөт.

0:00 Соода фирмасы сегиз сервердин жетөөсүнө жаңы кодду жайгаштырат, ал эми сегизинчиси дээрлик жети миллиард долларлык акцияларды сатып жана сатат кырк беш мүнөттө, бул шаршемби күнү үчүн да абдан көп. 2012-жылдын 1-августу. Knight Capital, АКШдагы бардык акциялардын ондон бир бөлүгү акция соодасы, 440 миллион доллар жоготуу тууралуу билдирет. SEC кийин 460 миллиондон ашык санайт, Knightти он эки миллионго айыптайт, жана постмортемди өзү жазат: он барак, нөл сын атооч.

0:25 Кантип болот, эмне үчүн мүмкүн жана күнөө кимде. Бул The Daily Diff, постмортем. 27-июль. Нью-Йорк биржасы чекене ликвиддүүлүк программасын ишке киргизет 1-августта, ошондуктан Knight жаңы кодду SMARS, өзүнүн заказ роутерине көчүрөт, күнүнө бир нече сервер, кол менен. Бир техник, сегиз сервер, жети көчүрмө. Эч ким текшербейт; эч кандай эреже эч ким текшериши керек деп айтпайт. 8:01. Ички система кызматкерлерге ката жөнүндө электрондук кат жөнөтө баштайт: Power

0:51 Peg өчүрүлгөн. Ачылганга чейин токсон жети электрондук кат. Алар эскертүүлөр катары иштелип чыккан эмес, ошондуктан эч ким аларды окубайт, бул баасы бар дизайн чечими. 9:30, рынок ачылат. Жети сервер жаңы кодду иштетет. Сегизинчиси ошол эле желекти көрөт жана анын ордуна Power Pegти иштетет: Knight 2003-жылы колдонуудан чыгарган код жана эч качан өчүрүлгөн эмес. Ал 212 кардар заказы үчүн балдардын заказдарын жөнөтөт жана эч качан токтобойт.

1:13 Төрт миллион аткаруу. 397 миллион акция. Кармоо эсеби эки миллион долларлык чегинен ашып кетет, бул эч нерсеге туташкан эмес. Инженерлер, жандуу рынокто, жаңы кодду жети жакшы серверден өчүрүшөт, бул Power Pegти бардык жерде иштетет. Саат 10:15тер чамасында токтойт: үч жарым миллиард узун, үч бүтүн он беш миллиард кыска.

1:31 Бир: Power Pegдин токтотуу шарты, негизги заказ толтурулган деп айткан эсептегич, 2005-жылы жылдырылган жана эч качан кайра текшерилген эмес, ошондуктан эскирген код түбөлүккө кайталайт. Эки: жаңы функция Power Pegдин эски желегин кайра колдонот, ошондуктан ошол эле "ооба" эки серверде эки маанини билдирет. Үч: өчүрүү которгучу жок. Эч нерсе кирген заказдарды чыккан заказдарга салыштырбайт; эч нерсе SMARSты токтотпойт. Тобокелдик монитору - бул адамдар көзөмөлдөгөн экран; ал чектөөлөрдү көрсөтпөйт. git blame: жаңысынын ордуна кайра колдонулган желек, тогуз жыл бою чакырыла турган өлүү код,

2:00 жана экинчи көзү жок кол менен жайгаштыруу. Техник эмес. SEC буйругу эч качан анын атын атабайт, мен да атпайм. Жарылуу радиусу: 460 миллион доллар, болжол менен мүнөтүнө он миллион. Акциялар 63 пайызга төмөндөп эки доллар элүү сегизге, бир акциясы бир доллар элүүдөн 400 миллион доллар куткаруу, Рождествого чейин Getco менен биригүү. Hacker News, бейшемби: адам кийлигишпестен 45 мүнөт кантип иштеди? Иштеген жок. Адамдар аны ого бетер начарлатышты.

2:25 Өкүм, постмортем: REVERT. Knight эч качан өзүнүн постмортемди жазбайт; регулятор жазат, он төрт айдан кийин, жана оңдоо айып жана биригүү. Дүйшөмбү: жаңы функция, жаңы желек; өлүү код өчүрүлөт, өчүрүлбөйт; заказдарды жөнөткөн нерселердин баарына өчүрүү которгучу орнотулат. Мага дагы деле айтууга уруксат берилбеген окуяны жөнөтүңүз, комментарийлерде, же daily diff dot dev дареги боюнча. Бүгүнкү айырма ушул.

2:48 Мен Axrisiден Никомун. Жоопкерчиликтүү бириктирүү.

Булактар

  1. SEC Administrative Order, Release No. 34-70694 (Oct 16, 2013), In the Matter of Knight Capital Americas LLCwww.sec.gov
  2. SEC press release 2013-222, "SEC Charges Knight Capital With Violations of Market Access Rule"www.sec.gov
  3. Knight Capital Group 8-K, Aug 2, 2012 (the $440M statement)www.sec.gov
  4. Knight Capital Group 8-K, Aug 6, 2012 (the $400M convertible preferred)www.sec.gov
  5. Knight / GETCO merger announcement, Dec 19, 2012www.sec.gov
  6. NYT DealBook, "Knight Capital Says Trading Glitch Cost It $440 Million" (Aug 2, 2012)archive.nytimes.com
  7. Hacker News, Aug 2, 2012 (73 points)news.ycombinator.com
  8. Hacker News, "The $440M software error at Knight Capital" (294 points)news.ycombinator.com

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Окшош видеолор

postmortem · ky · 2026-ж., 25-сен.

Бир миллисекунддук мүчүлүштүк Улуу Британиянын аба кыймылын токтотту. Алты саатка.

Шейшемби күнү, 8-сентябрда, саат 10:00дө NATSтын Улуттук Аба Мейкиндиги Системасынын (NAS) ичиндеги бир кадимки squawk-кодун суроосу, ал баалуулукту жарым-жартылай жаңыртып жаткан кезде, жогорку артык

3:06 ↗
postmortem · ky · 2026-ж., 22-сен.

Кайра жүктөлгөн Telstraны 2006-жылга кайтарды. Тогуз миллион телефон.

Мельбурндагы инженер эртең мененки саат 2:50дө убакыт шассисин кайра иштетет, ал эми эртең менен Австралиянын эң чоң мобилдик тармагы 2006-жылдын ноябры экенине макул болот. 2026-жылдын 8-июлу: Telstr

3:15 ↗