Майкрософттун Outlook'ту калыбына келтирүү аракети трафик астында үзгүлтүккө учурап турду

Бул видео эмнелерди камтыйт

• Ар бир операциянын бэкенддик көз карандылыгын текшериңиз: Teams'тин негизги функцияларынын көбү жана SharePoint файлдарына түз кирүү иштеп турду, ал эми Exchange'ге көз каранды функциялар бузулган.
• Майкрософт кайтарылган серверлер трафик жеткенде кайра жооп бербей калышы мүмкүн экенин билдирди; анын ден соолукту иштетүүчү компонент жөнүндөгү түшүндүрмөсү гипотеза бойдон калды.
• Кеңейтилген кырк сегиз сааттык электрондук почтанын күтүү мөөнөтү кезекти жана артта калган почталарды иштетүүдө кечиктирилген почтаны сактоо үчүн арналган. Бул оңдоо мөөнөтү же универсалдуу жеткирүү кепилдиги болгон эмес.
• Жөнөкөй Graph дроссельдештирүү көрсөтмөсү Retry-After жана экспоненциалдык артка кайтарууну, эгер бул аталыш жок болсо, урматтоону сунуштайт; бул окуяны диагноздобойт же оңдобойт.

Котормо стенограмма

Англис тилиндеги баштапкы баяндамадан которулган. Жеткиликтүү аудио жана коштомо жазуулар YouTube тарабынан көзөмөлдөнөт.

Кайтарылган серверлер эмне үчүн кайра иштебей калды?

0:00 Майкрософт почта серверлерин кызматка кайтарды. Алар трафик кайтып келгенде кайра жооп бербей калышы мүмкүн. Бул жерде иштеп чыгуучулардын уландысы. Бул видеодо эмне үчүн калыбына келтирүү үзгүлтүккө учурап турду? Жана колдонмоңуздун кайсы бөлүктөрү дагы деле иштеп жатты? Майкрософт ошондой эле кечиктирилген электрондук почтага кырк сегиз саат берди. Бул сизге чындыгында эмне берет? Бүгүн жума, он үчүнчү ноябрь, жана бул The Daily Diff.

0:18 Exchange Online Майкрософттун хосттолгон электрондук почта кызматы, жана башка Майкрософттун үч

Кайсы функциялар Exchange'ге көз каранды эле?

0:22 алтымыш беш функциялары ага көз каранды. Бул жерде Майкрософттун статус барагындагы пайдалуу айырма. Teams чалуулары жана топтук чаттар негизинен иштеди. Календар функциялары жана почта кутусунун маалыматтарын сурануулар иштебей калышы мүмкүн. Колдонмоңуз чындыгында колдонгон көз карандылыкты текшериңиз. Бул дегенди календар кызматташуудан баш тартса да, жолугушуу дагы деле өтүшү мүмкүн. SharePoint'теги файлдарга түз кирүү да иштеп турду, ал эми айрым бөлүшүү функциялары жабыркады.

0:42 Терезедеги логотип кийинки чыкылдатууңузга кайсы бэкенд керектиги жөнүндө өтө аз маалымат берет. Үзгүлтүк бейшемби күнү башталган, Майкрософт алгач Америкадагы почта кутусуна кирүү мүмкүнчүлүгүн иликтеген. Андан кийин ал кайсы бир аймактагы колдонуучулар жабыркашы мүмкүн экенин тастыктады. CNN банктарда, өкмөттөрдө жана соттордо көйгөйлөр бар экенин билдирди. Жетпей жаткан электрондук почта ыңгайсыз, анткени кимдир бирөөнүн чыныгы иши анын келишине көз каранды. Майкрософттун алгачкы түшүндүрмөсү жеткиликтүү серверлердин жоголушу болду. Ошол машиналар аткарышы керек болгон иш калган инфраструктураны ашыкча жүктөдү.

Жетпей жаткан кубаттуулук кызматты кантип ашыкча жүктөйт?

1:06 Кубаттуулугу жоголгондо, сиз кызматты жөнөкөй суроо-талап менен ашыкча жүктөй аласыз. Электрондук почта жөнөтүүгө эч ким күтүүсүздөн кызыгып калбаса дагы, кезек узарып кетет. Андан кийин компания автоматташтырылган ден соолукту текшерүүлөрдү иликтеди. Бул текшерүүлөр сервердин иштей алабы же жокпу, чечүүгө жардам берет. Майкрософт сервердин ден соолугун иштетүүчү компонент тартылышы мүмкүн деди. Бул дагы деле уланып жаткан иликтөөнүн гипотезасы. Бизде ошол серверлер эмне үчүн алгач жеткиликсиз болуп калганын так түшүндүргөн акыркы окуя отчету жок. Жаңыртуулар нөөмөтчүлөрдүн эртең мененки тамакка болгон кызыгуусу бара-бара азайып бараткандай окулат.

1:29 Жайгаштырууларды тындыруу. Трафикти жылдыруу. Серверлерди өчүрүп күйгүзүү. Майкрософт кайсы бир бөлүгүн кайра алып келген альтернативдик ден соолукту текшерүүнү тастыктады

Майкрософт биринчи эмне кылды?

1:37 жана жооп бербеген машиналарды аныктоо жана өчүрүп күйгүзүү үчүн автоматташтырылган системаларды даярдады. Ар бир жаңыртуу кубаттуулукту калыбына келтирүү аракетин сүрөттөдү. Андан кийин калыбына келтирүү циклин түшүндүргөн сап келди. Майкрософт кызматка кайтарылган серверлер трафик алгандан кийин кайра жооп бербей калышы мүмкүн деди. Машина кайра келип, чыныгы ишти алып, жооп бербей калышы мүмкүн. Бул байкоо жооптордогу эч кимдин ишенимдүү теориясынан күчтүү далил. Ошол абалдар аркылуу ошол эле серверди элестетиңиз. Жеткиликсиз. Кызматка кайтарылган.

1:59 Трафик алып жатат. Кайра жооп бербейт. Бул Майкрософттун эсебин көрсөтөт. Ошол акыркы өтүүнү эмне козгойт деген суроого жооп жок. Өчүрүп күйгүзүү убактылуу жакшырууну жаратышы мүмкүн, ал эми серверди жеңген абал чечилбей калат. Аны өчүрүп, кайра күйгүзүү кеңеши ашыкча иштөө убактысын эсептей баштайт. Инженерлер иш кайтып келгенден кийин эмне болорун текшериши керек. Кардарларга кийинки суроо-талап аркылуу кызматтын иштешин улантуу керек,

2:18 жана кийинкиси аркылуу. Майкрософт айрым жерлердеги жабыркаган инфраструктурага жеткен айрым трафикти чектеди. Ошондой эле ал серверлердин бир бөлүгүн мурунку конфигурацияны колдонуп кайра курду, алар жооп берүүнү улантабы же жокпу текшерүү үчүн. Бул билдирилген жумшартуу эксперименттери болду. Калыбына келтирүү учурунда жайгаштырууларды тындыруу, жума күнкү жайгаштыруу баштапкы үзгүлтүккө себеп болгондугуна эч кандай далил бербейт. Майкрософттун жума күнкү саат он бир нөл төрт UTC жаңыртуусу боюнча, Азия-Тынч океандын айрым бөлүктөрүндө калыбына келтирүү иштери аяктаган.

2:39 Трафик акырындык менен кайтып келип, почта кутусуна кирүү жана кечиктирилген электрондук почтаны иштетүү жакшырган. Кээ бир колдонуучулар дагы деле үзгүлтүктүү көйгөйлөргө дуушар болушу мүмкүн, жана башка жерлерде калыбына келтирүү уланды. Бул биздин отчеттун кесилген убагы.

Отчеттун кесилген убагында эмне белгилүү болчу?

2:48 Майкрософт зыяндуу аракеттердин далили жок экенин билдирди, жана жумшартуудан кийин окуянын толук отчетун убада кылды. Мен кылмышкерди аныктаганга чейин ошол отчетту күтөөр элем. Интернеттик детективдик иш сиз баракты жаңылап бүтө электе эле сизге кылмышкерди бере алат. Иштеп чыгуучулар үчүн Microsoft Graph көз карандылыкты өзгөчө оңой өткөрүп жиберүүгө мүмкүндүк берет. Анын Exchange почтасы, календары жана байланыштары үчүн суроо-талаптары убакытты ашып кетиши мүмкүн. Колдонмоңуз Graph'ты бир операция үчүн ийгиликтүү чакырып, башкасында иштебей калышы мүмкүн. Ийгиликтүү, байланышсыз суроо-талап колдонуучуңузга керектүү почта кутусу операциясы аяктайбы же жокпу, жөнүндө аз маалымат берет.

3:10 Статус барагына да өзүнүн качуу жолу керек болчу. Майкрософт окуя тууралуу маалыматты ачык жарыялады, анткени администраторлор кызматтын ден соолугун окуу үчүн администратор борборун жүктөй албай калышы мүмкүн. Эмне бузулганын табуу үчүн башкаруу панелинде эмне бузулганына көз каранды болгондо, башкаруу панели окуяга кошулган.

Эмне үчүн бир Graph суранычы иштебей калышы мүмкүн?

3:20 Сырткы каналдагы статус шилтемесин жеткиликтүү кармаңыз. Жөнөкөй Graph дроссельдештирүү үчүн, Майкрософттун көрсөтмөсү суроо-талап өтө көп суроо-талаптар жообун алганда кайра аракет кылууну урматтоону айтат, жана эгер бул аталыш жок болсо, экспоненциалдык артка кайтарууну колдонууну сунуштайт. Бул көрсөтмө дроссельдештирүүнү башкарат. Бул үзгүлтүктү диагноздобойт же кайра аракеттер кызматты калыбына келтирет деп убада кылбайт. Эми кырк сегиз саат. Майкрософттун кеңейтилген статус барагы кезекти жана артта калган почталарды иштетүүгө артыкчылык берип, кечиктирилген билдирүүлөрдү сактоо үчүн электрондук почтанын күтүү мөөнөтүн кеңейткенин айтат.

3:46 Бул кечиктирилген почтага калыбына келтирүү учурунда көбүрөөк убакыт берет. Ал почтанын күтүү мөөнөтүн белгилейт. Майкрософт кызматты оңдоо үчүн кырк сегиз сааттык мөөнөт берген эмес, жана ар бир билдирүү келет деп кепилдик берген эмес. Андыктан жеткирүү талаптарын чынчыл кармаңыз. Кечиктирилген билдирүү сөзсүз эле жоголуп кеткен жок, жана кезекке коюлган билдирүү сөзсүз эле алуучусуна жеткен жок. Убакытка сезимтал иштер үчүн, натыйжаны бекитилген көз карандысыз канал аркылуу текшериңиз.

48 сааттык почта терезеси эмне берет?

4:05 Клиент терезеси бэкенд дагы деле калыбына келип жатканда оптимисттик жеткирүү дүмүрчөгү болуп саналат. Бул акыры окуя отчетунда окуй турган көп нерсени калтырат. Эгер сиз муну уккандан көрө окуганды кааласаңыз, diff ар күнү эртең менен почтаңызга келет, daily diff dot dev дарегинде акысыз, шилтеме төмөндө. Ошентип, бүгүнкү өкүм, NEEDS REVIEW. Мен калыбына келтирүүнү карап чыгууну улантат элем, анткени Майкрософттун өз жаңыртуулары кайтарылган серверлердин трафик астында иштебей калганын көрсөттү. Пайдалуу сыноо - бул чыныгы иштерди кабыл алуу менен туруктуу кызмат көрсөтүү. Акыркы отчетко чейин, баштапкы себеп ачык бойдон калууда.

4:28 Жана бул бүгүнкү diff. Мен Axrisi'ден Нико. Жоопкерчилик менен бириктириңиз. Майкрософт Outlook'ту калыбына келтирүү трафик астында эмне үчүн үзгүлтүккө учурап турду? Кайтарылган серверлер трафик алгандан кийин кайра жооп бербей калышы мүмкүн деп Майкрософт билдирди. Анын иликтөөсү ашыкча жүктөлгөн процесстерди жана сервердин ден соолугун иштетүүчү компоненттеги мүмкүн болгон көйгөйдү сүрөттөдү, бирок баштапкы себеп дагы эле акыркы окуя отчетун күттү. Эпизод кайтарылган, иштеген жана кайра иштебей калган ырааттуулукту концептуалдык түрдө көрсөтөт; ал далилденген ички архитектураны же акыркы негизги себепти талап кылбайт.

Туруктуу калыбына келтирүү эмнени далилдеши керек?

4:49 Teams чалуулары эмне үчүн иштеп, ал эми календар функциялары иштебей калышы мүмкүн? Майкрософттун кеңейтилген кызматтын ден соолугу жөнүндөгү билдирүүсүнө ылайык, Teams'тин негизги чалуулары, жолугушуулары жана чаттары негизинен иштеп турду. Календар жана пландаштыруу сценарийлери Exchange Online'га көз каранды болгон жана үзгүлтүк учурунда иштебей калышы мүмкүн. SharePoint файлдарына түз кирүү да иштеп турду. Колдонмо деңгээлиндеги пайдалуу айырма - бул операциянын артындагы көз карандылык, ар бир функцияны продукт логотипинин астында бирдей ката абалын бөлүшөт деп кароо эмес. Кырк сегиз сааттык электрондук почтанын күтүү мөөнөтү оңдоо мөөнөтүн белгиледиби? Майкрософт кезекти жана артта калган почталарды иштетүүгө артыкчылык берип, кечиктирилген билдирүүлөрдү сактоо үчүн электрондук почтанын күтүү мөөнөтүн кеңейтти.

Булактар

1. ExpandedMicrosoftservicehealth, reportingcutoffNovember13 11:04:50UTC; earlier10:01:07observationshistoricalMicrosoft
2. Returned servers can become unresponsive again once they receive trafficMicrosoft 365 Status
3. Health-processing component investigation hypothesisMicrosoft 365 Status
4. Alternative health check returned a subset of serversMicrosoft 365 Status
5. Isolate, restart and reintroduce traffic to test stabilityMicrosoft 365 Status
6. Unavailable servers strain remaining infrastructureMicrosoft 365 Status
7. Initial Exchange mailbox-access investigation in the AmericasMicrosoft 365 Status
8. Users in any region may be affectedMicrosoft 365 Status
9. Email timeout extended to preserve delayed messagesMicrosoft 365 Status
10. Paused deployments, traffic redistribution and server restartsMicrosoft 365 Status
11. Independent live reporting on the Microsoft email disruptionCNN
12. Microsoft Graph throttling guidanceMicrosoft Learn
13. Exchange Online service descriptionMicrosoft Learn
14. Satya Nadella portrait by OFFICIAL LEWEB PHOTOS (2013), CC BY 2.0. Whole portrait-based artwork adapted by cropping, background removal, resizing and text/composition; vendor identity only, no endorsement or current reaction.OFFICIAL LEWEB PHOTOS
15. Portrait-only CC BY 2.0 licence; separate from third-party source/cartoon rightsCreative Commons
16. WWE still. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.WWE / Imgflip source hosting
17. The Simpsons/Bob GIF. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.The Simpsons / 20th Television / Disney; GIPHY source hosting