+− THE DAILY DIFFdev & AI news
REVERT

8 સર્વરમાંથી 7 પર ડિપ્લોય કરવાથી $460 મિલિયનનું નુકસાન થયું. 45 મિનિટ.

ઑગસ્ટ 1, 2012, સવારે 9:30 ET: નાઈટ કેપિટલ, યુ.એસ.ના કુલ શેર ટ્રેડિંગના આશરે દસમા ભાગ પાછળનો માર્કેટ મેકર, તેણે તેના આઠ SMARS સર્વરમાંથી સાત પર નવો ઓર્ડર-રૂટિંગ કોડ જમા કર્યો છે.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

ઑગસ્ટ 1, 2012, સવારે 9:30 ET: નાઈટ કેપિટલ, યુ.એસ.ના કુલ શેર ટ્રેડિંગના આશરે દસમા ભાગ પાછળનો માર્કેટ મેકર, તેણે તેના આઠ SMARS સર્વરમાંથી સાત પર નવો ઓર્ડર-રૂટિંગ કોડ જમા કર્યો છે. આઠમો સર્વર હજુ પણ "પાવર પેગ" ચલાવે છે, જે 2003માં નિવૃત્ત થયેલો કોડ છે, જે નવી સુવિધા ફરીથી ઉપયોગમાં લેતી હોય તે જ ફ્લેગ પાછળ છે. 45 મિનિટ સુધી તે ક્યારેય ન અટકતા ચાઈલ્ડ ઓર્ડર મોકલે છે: 4 મિલિયન એક્ઝિક્યુશન, 397 મિલિયન શેર, લગભગ $7 બિલિયનની પોઝિશન્સ, $460 મિલિયનનું નુકસાન. શરૂઆત પહેલા 97 ચેતવણી ઈ-મેલ આવી ગયા હતા. પોસ્ટમોર્ટમ, SECના પોતાના આદેશમાંથી: મેન્યુઅલ ડિપ્લોય જેની કોઈએ સમીક્ષા કરી ન હતી, બે અર્થો ધરાવતો ફ્લેગ, 2005માં ખસેડવામાં આવેલો અને ક્યારેય ફરીથી પરીક્ષણ ન કરાયેલો સ્ટોપ-કાઉન્ટર, અસ્તિત્વમાં ન હોય તેવો કિલ સ્વિચ, અને લાઈવ માર્કેટમાં "ફિક્સ" જેણે તેને વધુ ખરાબ બનાવ્યું. ફિક્સ પરનો ચુકાદો: REVERT.

લખેલી આવૃત્તિ વાંચો (અંગ્રેજી) ↗

આ વીડિયોમાં શું આવરી લેવામાં આવ્યું છે

  • જુલાઈ 27–31, 2012: RLP કોડ હાથ વડે 8 SMARS સર્વરમાંથી 7 પર કોપી કરવામાં આવ્યો; કોઈ બીજો સમીક્ષક નહીં, કોઈ લેખિત પ્રક્રિયા નહીં.
  • ઑગસ્ટ 1, સવારે 8:01: ખુલે તે પહેલા 97 "પાવર પેગ નિષ્ક્રિય" ઈ-મેલ; ચેતવણી તરીકે રચાયેલા નહોતા, વાંચવામાં આવ્યા નહોતા.
  • ઑગસ્ટ 1, 9:30–10:15: 212 ઓર્ડર 154 સ્ટોકમાં 4M એક્ઝિક્યુશન બન્યા; $3.5B લોંગ, $3.15B શોર્ટ; $460M નું નુકસાન; નવો કોડ અનઇન્સ્ટોલ કરવાથી તે વધુ ખરાબ બન્યું.
  • ઑગસ્ટ 2 – ડિસેમ્બર 19: શેર −63% ઘટીને $2.58 થયા, $1.50/શેર પર $400M નો બચાવ, GETCO સાથે વિલિનીકરણ; ઑક્ટોબર 2013: $12M SEC પેનલ્ટી, પ્રથમ માર્કેટ એક્સેસ રૂલ કેસ.

પ્રશ્નો અને જવાબો

ઓગસ્ટ 2012માં નાઈટ કેપિટલના ટ્રેડિંગ નુકસાનનું કારણ શું હતું?

નાઈટ કેપિટલે તેના આઠમાંથી સાત SMARS સર્વર પર નવી ઓર્ડર-રૂટિંગ કોડ મેન્યુઅલી જમાવ્યો. આઠમા સર્વર પર હજુ પણ Power Peg ચાલતું હતું, જે 2003માં નિવૃત્ત થયેલ કોડ હતો, અને તે જ ફ્લેગ પાછળ હતું જેનો નવી સુવિધાએ ફરીથી ઉપયોગ કર્યો. SEC ના આદેશ મુજબ, તેણે 212 ગ્રાહક ઓર્ડર માટે ચાઇલ્ડ ઓર્ડર મોકલ્યા અને ક્યારેય બંધ ન થયું, જેના પરિણામે લગભગ 45 મિનિટમાં 4 મિલિયન એક્ઝેક્યુશન અને 397 મિલિયન શેર થયા, અને $460 મિલિયનનું નુકસાન થયું.

www.sec.gov · www.sec.gov

નવા કોડ માટે જૂના ફીચર ફ્લેગનો ફરીથી ઉપયોગ કરવો શા માટે જોખમી છે?

તે જ ફ્લેગ મૂલ્ય પછી જુદા જુદા સર્વર પર બે અલગ અલગ વસ્તુઓનો અર્થ દર્શાવે છે. નાઈટના કિસ્સામાં, નવી સુવિધાએ Power Peg ના જૂના ફ્લેગનો ફરીથી ઉપયોગ કર્યો, તેથી તે જ સેટિંગે સાત સર્વર પર નવી વર્તણૂક અને આઠમા પર નિવૃત્ત Power Peg કોડને સક્ષમ કર્યું. Power Peg નું સ્ટોપ કાઉન્ટર પણ 2005 માં ખસેડવામાં આવ્યું હતું અને ક્યારેય ફરીથી પરીક્ષણ કરવામાં આવ્યું ન હતું, તેથી નિવૃત્ત કોડ કાયમ માટે લૂપ કરતો રહ્યો.

www.sec.gov

ચેતવણીઓ કે નિયંત્રણોએ નાઈટ કેપિટલના અનિયંત્રિત ઓર્ડરને વહેલા કેમ ન રોક્યા?

ઓપન થતાં પહેલાં Power Peg નિષ્ક્રિય થયેલું દર્શાવતી સત્તાણું ઇમેઇલ્સ આવી, પરંતુ તે એલર્ટ તરીકે ડિઝાઇન કરવામાં આવી ન હતી અને કોઈએ તે વાંચી ન હતી. કોઈ પણ વસ્તુએ ઓર્ડર આઉટને ઓર્ડર ઇન સાથે સરખાવ્યું ન હતું, અને ત્યાં કોઈ કિલ સ્વીચ નહોતી. જોખમ મોનિટર એ માણસો દ્વારા જોવામાં આવતી એક સ્ક્રીન હતી જે મર્યાદાઓ દર્શાવતી ન હતી. એન્જિનિયરોએ સાત સારા સર્વર પરથી નવો કોડ અનઇન્સ્ટોલ કર્યો, જેના કારણે Power Peg બધે ચાલુ થઈ ગયું.

www.sec.gov · www.sec.gov

2012ના ટ્રેડિંગ ગ્લિચ પછી નાઈટ કેપિટલનું શું થયું?

શેર્સ 63% ઘટીને $2.58 થઈ ગયા, અને નાઈટે $1.50 પ્રતિ શેરના ભાવે $400 મિલિયનની બચાવ પેકેજ લીધી. તેણે ક્રિસમસ 2012 સુધીમાં GETCO સાથે મર્જર માટે સંમતિ આપી. 2013માં SEC એ નાઈટને તેના પ્રથમ માર્કેટ એક્સેસ રૂલ કેસમાં $12 મિલિયનનો દંડ ફટકાર્યો અને ઘટનાના લગભગ ચૌદ મહિના પછી પોતાનો પોસ્ટમોર્ટમ લખ્યો.

www.sec.gov · www.sec.gov · www.sec.gov

નાઈટ કેપિટલ ઘટના પછી એન્જિનિયરિંગ ટીમોએ શું બદલવું જોઈએ?

The Daily Diff નો ચુકાદો REVERT હતો. એપિસોડના ફેરફારો દરેક નવી સુવિધાને નવો ફ્લેગ આપવા, નિષ્ક્રિય કોડને અક્ષમ કરવાને બદલે તેને કાઢી નાખવા, અને ઓર્ડર મોકલતી કોઈપણ વસ્તુને બંધ સ્વીચ આપવા માટે છે. તેમાં એ પણ નોંધવામાં આવ્યું હતું કે નાઈટે ક્યારેય પોતાનો પોસ્ટમોર્ટમ લખ્યો ન હતો. SEC એ લખ્યો હતો, અને મેન્યુઅલ જમાવટમાં કોઈ બીજો સમીક્ષક નહોતો અને કોઈ લેખિત પ્રક્રિયા નહોતી.

www.sec.gov · www.sec.gov

અનુવાદિત ટ્રાન્સક્રિપ્ટ

મૂળ અંગ્રેજી કથામાંથી અનુવાદિત. ઉપલબ્ધ ઑડિઓ અને કૅપ્શન્સ YouTube દ્વારા નિયંત્રિત થાય છે.

0:00 એક ટ્રેડિંગ ફર્મ આઠ સર્વરમાંથી સાત પર નવો કોડ ડિપ્લોય કરે છે, અને આઠમો લગભગ સાત અબજ ડોલરના શેરની ખરીદી અને વેચાણ કરે છે પિસ્તાળીસ મિનિટમાં, જે ઘણું છે, ભલે તે બુધવાર હોય. 1 ઓગસ્ટ, 2012. નાઈટ કેપિટલ, યુ.એસ.ના કુલ શેર ટ્રેડિંગનો દસમો ભાગ, 440 મિલિયન ડોલરનું નુકસાન નોંધાવે છે. SEC પાછળથી 460 મિલિયનથી વધુ ગણે છે, નાઈટને બાર મિલિયનનો દંડ કરે છે, અને પોસ્ટમોર્ટમ પોતે લખે છે: દસ પૃષ્ઠો, શૂન્ય વિશેષણો.

0:25 આ કેવી રીતે થાય છે, શા માટે શક્ય છે, અને ખરેખર કોને દોષ મળે છે. આ The Daily Diff છે, પોસ્ટમોર્ટમ. 27 જુલાઈ. ન્યુ યોર્ક સ્ટોક એક્સચેન્જ રિટેલ લિક્વિડિટી પ્રોગ્રામ શરૂ કરે છે 1 ઓગસ્ટના રોજ, તેથી નાઈટ નવો કોડ SMARS પર, તેના ઓર્ડર રૂટર પર, કોપી કરે છે, રોજ થોડા સર્વર પર, હાથ વડે. એક ટેકનિશિયન, આઠ સર્વર, સાત કોપી. કોઈ તપાસતું નથી; કોઈ નિયમ કહેતો નથી કે કોઈએ તપાસવું પડે. સવારે 8:01. એક આંતરિક સિસ્ટમ સ્ટાફને એક ભૂલનો ઇમેઇલ કરવાનું શરૂ કરે છે જે વાંચે છે: પાવર

0:51 પેગ નિષ્ક્રિય. ખુલે તે પહેલાં સત્તાણું ઇમેઇલ. તેઓ ચેતવણી તરીકે રચાયેલા નથી, તેથી કોઈ તેમને વાંચતું નથી, જે કિંમત ટેગ સાથેનો એક ડિઝાઇન નિર્ણય છે. 9:30, બજાર ખુલે છે. સાત સર્વર નવો કોડ ચલાવે છે. આઠમો એ જ ફ્લેગ જુએ છે અને તેના બદલે પાવર પેગ ચલાવે છે: કોડ નાઈટે 2003 માં નિવૃત્ત કર્યો અને ક્યારેય ડિલીટ કર્યો નહીં. 2003 અને ક્યારેય ડિલીટ કર્યો નહીં. તે 212 ગ્રાહક ઓર્ડર માટે ચાઈલ્ડ ઓર્ડર મોકલે છે, અને ક્યારેય અટકતો નથી.

1:13 ચાર મિલિયન એક્ઝિક્યુશન. 397 મિલિયન શેર. એક હોલ્ડિંગ એકાઉન્ટ તેની બે-મિલિયન-ડોલરની મર્યાદા વટાવી જાય છે, જે કંઈપણ સાથે જોડાયેલ નથી. ઇજનેરો, લાઇવ માર્કેટમાં, સાત સારા સર્વરમાંથી નવો કોડ અનઇન્સ્ટોલ કરે છે, જે દરેક જગ્યાએ પાવર પેગ ચાલુ કરે છે. લગભગ 10:15 વાગ્યે તે અટકે છે: સાડા ત્રણ અબજ લોંગ, ત્રણ પોઈન્ટ પંદર અબજ શોર્ટ.

1:31 એક: પાવર પેગની સ્ટોપ કન્ડિશન, કાઉન્ટર જે કહે છે કે પેરેન્ટ ઓર્ડર ભરાઈ ગયો છે, તે 2005 માં ખસેડવામાં આવે છે અને ક્યારેય ફરીથી પરીક્ષણ કરવામાં આવતું નથી, તેથી નિવૃત્ત કોડ હંમેશા લૂપ કરે છે. બે: નવી સુવિધા પાવર પેગના જૂના ફ્લેગનો ફરીથી ઉપયોગ કરે છે, જેથી સમાન હાનો અર્થ બે સર્વર પર બે વસ્તુઓ થાય છે. ત્રણ: કોઈ કિલ સ્વિચ નથી. કંઈપણ બહારના ઓર્ડરની સરખામણી અંદરના ઓર્ડર સાથે કરતું નથી; કંઈપણ SMARS ને અટકાવતું નથી. રિસ્ક મોનિટર એ મનુષ્યો દ્વારા જોવામાં આવતી સ્ક્રીન છે; તે મર્યાદાઓ બતાવતી નથી. git blame: નવાને બદલે ફરીથી ઉપયોગમાં લેવાયેલ ફ્લેગ, નવ વર્ષથી બોલાવી શકાય તેવો ડેડ કોડ,

2:00 વર્ષો, અને બીજી જોડી આંખો વિનાનો મેન્યુઅલ ડિપ્લોય. ટેકનિશિયન નહીં. SEC આદેશ ક્યારેય તેનું નામ આપતો નથી, અને હું પણ નહીં આપું. બ્લાસ્ટ રેડિયસ: 460 મિલિયન ડોલર, લગભગ દસ મિલિયન પ્રતિ મિનિટ. શેર 63 ટકા ઘટીને બે ડોલર પચાસ આઠ થયા, ચારસો મિલિયન ડોલરનો બચાવ એક ડોલર પચાસ પ્રતિ શેર પર, ક્રિસમસ સુધીમાં ગેટકો સાથે વિલિનીકરણ. હેકર ન્યૂઝ, ગુરુવાર: તે માનવીય હસ્તક્ષેપ વિના 45 મિનિટ કેવી રીતે ચાલ્યું? ચાલ્યું નહોતું. મનુષ્યોએ તેને વધુ ખરાબ બનાવ્યું.

2:25 ચુકાદો, પોસ્ટમોર્ટમ: રીવર્ટ. નાઈટ ક્યારેય પોતાનું પોસ્ટમોર્ટમ લખતો નથી; નિયમનકાર લખે છે, ચૌદ મહિના પછી, અને સુધારો દંડ અને વિલિનીકરણ છે. સોમવાર: નવી સુવિધા, નવો ફ્લેગ; ડેડ કોડ ડિલીટ થાય છે, નિષ્ક્રિય નહીં; ઓર્ડર મોકલતી કોઈપણ વસ્તુને બંધ સ્વિચ મળે છે. મને તે ઘટના મોકલો જેના વિશે તમને હજુ પણ વાત કરવાની મંજૂરી નથી, ટિપ્પણીઓમાં, અથવા the daily diff dot dev પર. અને આ આજનો diff છે.

2:48 હું Axrisi તરફથી Niko છું. જવાબદારીપૂર્વક મર્જ કરો.

સ્ત્રોતો

  1. SEC Administrative Order, Release No. 34-70694 (Oct 16, 2013), In the Matter of Knight Capital Americas LLCwww.sec.gov
  2. SEC press release 2013-222, "SEC Charges Knight Capital With Violations of Market Access Rule"www.sec.gov
  3. Knight Capital Group 8-K, Aug 2, 2012 (the $440M statement)www.sec.gov
  4. Knight Capital Group 8-K, Aug 6, 2012 (the $400M convertible preferred)www.sec.gov
  5. Knight / GETCO merger announcement, Dec 19, 2012www.sec.gov
  6. NYT DealBook, "Knight Capital Says Trading Glitch Cost It $440 Million" (Aug 2, 2012)archive.nytimes.com
  7. Hacker News, Aug 2, 2012 (73 points)news.ycombinator.com
  8. Hacker News, "The $440M software error at Knight Capital" (294 points)news.ycombinator.com

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

સંબંધિત વીડિયો

postmortem · gu · 19 સપ્ટે, 2026

એક ખાલી ક્ષેત્ર પર Google Cloud ક્રેશ થયું. ત્રણ કલાક.

ખાલી ક્ષેત્રોવાળી એક પોલિસી રો નલ પોઇન્ટર સાથે અથડાય છે, અને Google Cloud એક સાથે દરેક ક્ષેત્રમાં ક્રેશ થાય છે — પછી Cloudflare તેની સાથે નિષ્ફળ જાય છે. 12 જૂન, 2025, 17:49 UTC: સર્વિસ કંટ્રોલ, જે દરે

2:57 ↗
postmortem · gu · 12 સપ્ટે, 2026

એક રેગ્યુલર એક્સપ્રેશને ક્લાઉડફ્લેરને નીચે લાવ્યું. ૨૭ મિનિટ.

૨ જુલાઈ, ૨૦૧૯, ૧૩:૪૨ UTC: ક્લાઉડફ્લેરના વેબ એપ્લિકેશન ફાયરવોલ માટે એક નવો નિયમ લગભગ બે સેકન્ડમાં ૧૮૦+ શહેરોમાં લાઇવ થાય છે. તે સિમ્યુલેટ મોડમાં XSS નિયમ છે, તેથી તે કંઈપણ અવરોધિત કરતું નથી, પરંતુ તે હ

3:00 ↗
postmortem · gu · 25 સપ્ટે, 2026

એક મિલિસેકન્ડના બગે યુકેના હવાઈ ટ્રાફિકને રોકી દીધો. છ કલાક સુધી.

મંગળવાર, 8 સપ્ટેમ્બરના રોજ સવારે 10:00 વાગ્યે, NATSના નેશનલ એરસ્પેસ સિસ્ટમ (NAS) માં એક રૂટિન સ્ક્વૉક-કોડ વિનંતીને ઉચ્ચ-પ્રાથમિકતાવાળા સંદેશ દ્વારા અટકાવવામાં આવે છે જ્યારે તે મૂલ્યને અપડેટ કરવાની પ્ર

3:06 ↗
postmortem · gu · 22 સપ્ટે, 2026

એક રીબૂટે ટેલ્સ્ટ્રાને 2006માં મોકલી દીધું. નવ મિલિયન ફોન.

મેલબોર્નમાં એક એન્જિનિયર સવારે 2:50 વાગ્યે ટાઈમિંગ ચેસિસને ફરીથી ચાલુ કરે છે, અને સવારના નાસ્તા સુધીમાં ઓસ્ટ્રેલિયાનું સૌથી મોટું મોબાઈલ નેટવર્ક સહમત થાય છે કે તે નવેમ્બર 2006 છે. 8 જુલાઈ, 2026: ટેલ્સ

3:15 ↗