+− THE DAILY DIFFdev & AI news
REVERT

8 сервердің 7-іне енгізілген жаңарту 460 миллион доллар шығынға ұшыратты. 45 минут.

2012 жылғы 1 тамыз, Шығыс уақыты бойынша сағат 9:30: АҚШ акциялары саудасының шамамен оннан бірін басқаратын Knight Capital нарық жасаушысы өзінің сегіз SMARS серверінің жетеуіне жаңа тапсырыс бағыттау кодын енгізді.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

2012 жылғы 1 тамыз, Шығыс уақыты бойынша сағат 9:30: АҚШ акциялары саудасының шамамен оннан бірін басқаратын Knight Capital нарық жасаушысы өзінің сегіз SMARS серверінің жетеуіне жаңа тапсырыс бағыттау кодын енгізді. Сегізінші серверде әлі де 2003 жылы ескірген «Power Peg» коды жұмыс істеп тұрды, бұл жаңа функция қайта пайдаланатын белгінің артында. 45 минут бойы ол ешқашан тоқтамайтын қосалқы тапсырыстарды жіберді: 4 миллион орындау, 397 миллион акция, шамамен 7 миллиард долларлық позициялар, 460 миллион доллар шығын. Нарық ашылғанға дейін 97 ескерту электронды хаты келген. SEC-тің өз бұйрығынан кейінгі талдау: ешкім тексермеген қолмен енгізу, екі мағыналы белгі, 2005 жылы жылжытылған және ешқашан қайта тексерілмеген тоқтату есептегіші, жоқ болған тоқтату қосқышы және нарықтағы жағдайды нашарлатқан «түзету». Түзету туралы үкім: REVERT.

Жазбаша басылымды оқыңыз (ағылшынша) ↗

Бұл бейне не туралы

  • 2012 жылғы 27–31 шілде: RLP коды SMARS серверлерінің 8-інің 7-іне қолмен көшірілді; екінші тексеруші болмады, жазбаша процедура жоқ
  • 1 тамыз, таңғы сағат 8:01: нарық ашылғанға дейін 97 «Power Peg өшірілді» электронды хаты; ескерту ретінде жасалмаған, оқылмаған
  • 1 тамыз, 9:30–10:15: 212 тапсырыс 154 акция бойынша 4М орындауға айналды; 3.5 млрд доллар ұзын, 3.15 млрд доллар қысқа; 460 млн доллар жоғалды; жаңа кодты жою жағдайды нашарлатты
  • 2 тамыз – 19 желтоқсан: акциялар 63%-ға 2.58 долларға дейін төмендеді, акцияға 1.50 доллардан 400 млн доллар құтқару, GETCO-мен бірігу; 2013 қазан: 12 млн доллар SEC айыппұлы, бірінші Нарыққа кіру ережесі бойынша іс

Сұрақтар мен жауаптар

2012 жылдың тамыз айында Knight Capital сауда шығынына не себеп болды?

Knight Capital өзінің сегіз SMARS серверінің жетеуіне жаңа тапсырыс бағыттау кодын қолмен орнатты. Сегізіншісі 2003 жылы ескірген Power Peg кодын, жаңа мүмкіндік қайта пайдаланған бір тудың артында жұмыс істеді. SEC бұйрығына сәйкес, ол 212 клиент тапсырысы үшін бала тапсырыстарды жіберді және ешқашан тоқтамады, 45 минут ішінде 4 миллион орындау мен 397 миллион акцияны шығарды, және 460 миллион доллар шығынға ұшырады.

www.sec.gov · www.sec.gov

Неліктен ескі функция туын жаңа код үшін қайта пайдалану қауіпті?

Бірдей ту мәні әртүрлі серверлерде екі түрлі мағынаны білдіреді. Knight жағдайында жаңа функция Power Peg-тің ескі туын қайта пайдаланды, сондықтан бір параметр жеті серверде жаңа мінез-құлықты және сегізіншісінде ескірген Power Peg кодын іске қосты. Power Peg-тің тоқтау санағышы 2005 жылы ауыстырылып, ешқашан қайта тексерілмеген, сондықтан ескірген код мәңгілік циклде болды.

www.sec.gov

Неліктен ескертулер немесе басқару элементтері Knight Capital-тің қашқын тапсырыстарын ертерек тоқтатпады?

Ашылуға дейін Power Peg өшірілді деген тоқсан жеті электрондық пошта келді, бірақ олар ескерту ретінде жасалмаған және оларды ешкім оқымады. Ешнәрсе кіріс тапсырыстарды шығыс тапсырыстармен салыстырмады, және өшіру қосқышы болмады. Тәуекел мониторы адамдар қарайтын экран болды, ол шектеулерді көрсетпеді. Инженерлер жеті жақсы серверден жаңа кодты жойды, бұл Power Peg-ті барлық жерде қосты.

www.sec.gov · www.sec.gov

2012 жылғы сауда ақауынан кейін Knight Capital-ға не болды?

Акциялар 63% төмендеп $2.58 болды, және Knight акциясы $1.50 тұратын $400 миллиондық құтқаруды қабылдады. Ол 2012 жылдың Рождествосына қарай GETCO-мен бірігуге келісті. 2013 жылы SEC Knight-қа өзінің бірінші Нарыққа кіру ережесі бойынша ісінде $12 миллион айыппұл салды және оқиғадан кейін шамамен он төрт айдан кейін өзі постмортам жазды.

www.sec.gov · www.sec.gov · www.sec.gov

Knight Capital оқиғасынан кейін инженерлік топтар нені өзгертуі керек?

The Daily Diff-тің шешімі REVERT болды. Эпизодтың өзгерістері - әр жаңа функцияға жаңа ту беру, өлі кодты өшірудің орнына жою және тапсырыстарды жіберетін кез келген нәрсеге өшіру қосқышын беру. Ол сондай-ақ Knight-тің ешқашан өзінің постмортамын жазбағанын атап өтті. SEC жазды, және қолмен орналастырудың екінші тексерушісі және жазбаша процедурасы болмады.

www.sec.gov · www.sec.gov

Аударылған транскрипция

Бастапқы ағылшын тіліндегі баяндамадан аударылған. Қолжетімді аудио және субтитрлерді YouTube басқарады.

0:00 Сауда фирмасы жаңа кодты сегіз сервердің жетеуіне орналастырады, ал сегізіншісі жеті миллиард долларға жуық акцияны сатып алып, сатады қырық бес минут ішінде, бұл, сәрсенбі үшін де, өте көп. 2012 жылғы 1 тамыз. Knight Capital, барлық АҚШ акциялар саудасының оннан бірі, 440 миллион доллар шығын туралы хабарлайды. Кейінірек SEC 460-тан астамды есептеп, Knight-қа он екі миллион айыппұл салады, және өлімнен кейінгі талдауды өзі жазады: он бет, нөл сын есім.

0:25 Бұл қалай болады, неліктен мүмкін және кім кінәлі болады. Бұл The Daily Diff, өлімнен кейінгі талдау. 27 шілде. Нью-Йорк қор биржасы бөлшек сауда өтімділік бағдарламасын іске қосады 1 тамызда, сондықтан Knight жаңа кодты SMARS-қа, өзінің тапсырыс бағыттаушысына көшіреді, күніне бірнеше серверге, қолмен. Бір техник, сегіз сервер, жеті көшірме. Ешкім тексермейді; ешқандай ереже ешкім тексеруі керек деп айтпайды. Таңғы 8:01. Ішкі жүйе қызметкерлерге қате туралы электронды хат жібере бастайды: Power

0:51 Peg өшірілген. Нарық ашылғанға дейін тоқсан жеті электронды хат. Олар ескерту ретінде жасалмаған, сондықтан ешкім оларды оқымайды, бұл бағасы бар дизайн шешімі. 9:30, нарық ашылады. Жеті сервер жаңа кодты іске қосады. Сегізіншісі дәл сол белгіні көріп, оның орнына Power Peg-ті іске қосады: Knight 2003 жылы ескірген және ешқашан жойылмаған кодты. Ол 212 клиенттік тапсырыс үшін қосалқы тапсырыстарды жібереді және ешқашан тоқтамайды.

1:13 Төрт миллион орындау. 397 миллион акция. Ұстау шоты екі миллион долларлық лимитінен асып кетеді, бұл ешқайда қосылмаған. Инженерлер, нарықта, жаңа кодты жеті жақсы серверден жояды, бұл Power Peg-ті барлық жерде іске қосады. Сағат 10:15 шамасында тоқтайды: үш жарым миллиард ұзын, үш бүтін он бес миллиард қысқа.

1:31 Бірінші: Power Peg-тің тоқтату шарты, негізгі тапсырыс орындалды дейтін есептегіш, 2005 жылы жылжытылды және ешқашан қайта тексерілмеді, сондықтан ескірген код мәңгілік айналымда болады. Екінші: жаңа функция Power Peg-тің ескі белгісін қайта пайдаланады, сондықтан бір иә екі серверде екі мағынаны білдіреді. Үшінші: тоқтату қосқышы жоқ. Ешқандай нәрсе кіріс тапсырыстарды шығыс тапсырыстармен салыстырмайды; ешқандай нәрсе SMARS-ты тоқтатпайды. Тәуекел мониторы адамдар қарайтын экран; ол лимиттерді көрсетпейді. git blame: жаңаның орнына қайта пайдаланылған белгі, тоғыз жыл бойы шақырылатын өлі код,

2:00 және екінші тексерусіз қолмен орналастыру. Техник емес. SEC бұйрығы оның атын ешқашан атамайды, мен де атамаймын. Жарылыс радиусы: 460 миллион доллар, шамамен минутына он миллион. Акциялар 63 пайызға екі доллар елу сегізге дейін төмендеді, 400 миллион долларлық құтқару акцияға бір доллар елуден, Рождествоға дейін Getco-мен бірігу. Hacker News, бейсенбі: адам араласпай 45 минут қалай жұмыс істеді? Ол жұмыс істеген жоқ. Адамдар оны нашарлатты.

2:25 Үкім, өлімнен кейінгі талдау: REVERT. Knight ешқашан өзінің өлімнен кейінгі талдауын жазбайды; реттеуші жазады, он төрт айдан кейін, және түзету айыппұл мен бірігу болады. Дүйсенбі: жаңа функция, жаңа белгі; өлі код жойылады, өшірілмейді; тапсырыс жіберетін кез келген нәрсеге өшіру қосқышы беріледі. Маған әлі де айтуға рұқсат етілмейтін оқиғаны жіберіңіз, комментарийлерде немесе the daily diff dot dev мекенжайы бойынша. Ал бүгінгі айырмашылық осы.

2:48 Мен Axrisi-ден Никомын. Жауапкершілікпен біріктіріңіз.

Дереккөздер

  1. SEC Administrative Order, Release No. 34-70694 (Oct 16, 2013), In the Matter of Knight Capital Americas LLCwww.sec.gov
  2. SEC press release 2013-222, "SEC Charges Knight Capital With Violations of Market Access Rule"www.sec.gov
  3. Knight Capital Group 8-K, Aug 2, 2012 (the $440M statement)www.sec.gov
  4. Knight Capital Group 8-K, Aug 6, 2012 (the $400M convertible preferred)www.sec.gov
  5. Knight / GETCO merger announcement, Dec 19, 2012www.sec.gov
  6. NYT DealBook, "Knight Capital Says Trading Glitch Cost It $440 Million" (Aug 2, 2012)archive.nytimes.com
  7. Hacker News, Aug 2, 2012 (73 points)news.ycombinator.com
  8. Hacker News, "The $440M software error at Knight Capital" (294 points)news.ycombinator.com

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Ұқсас бейнелер

postmortem · kk · 2026 ж. 25 қыр.

Бір миллисекундтық қате Ұлыбритания әуе қозғалысын тоқтатты. Алты сағат.

8 қыркүйек сейсенбі күні сағат 10:00-де NATS-тың Ұлттық әуе кеңістігі жүйесіндегі (NAS) әдеттегі squawk-кодын сұрауы мәнді жаңарту кезінде басымдығы жоғары хабарламамен үзіледі. Әсер ету терезесі шама

3:06 ↗
postmortem · kk · 2026 ж. 22 қыр.

Қайта жүктеу Telstra-ны 2006 жылға жіберді. Тоғыз миллион телефон.

Мельбурндегі инженер таңғы сағат 2:50-де тайминг шассиін қайта қосады, содан кейін таңғы асқа дейін Австралияның ең ірі мобильді желісі 2006 жылдың қарашасы деп келіседі. 2026 жылдың 8 шілдесі: Telstr

3:15 ↗