Опоравак Мицрософт Оутлоок-а стално је пропадао под саобраћајем

Шта овај видео покрива

• Проверите зависност позадине сваке операције: већина основних функција Теамс-а и директан приступ датотекама СхареПоинт-а остали су функционални, док су функције зависне од Екцханге-а биле оштећене.
• Мицрософт је известио да враћени сервери могу поново постати неодговорни када им стигне саобраћај; његово објашњење компоненте за обраду здравља остало је хипотеза.
• Продужено четрдесетосмочасовно временско ограничење за е-пошту имало је за циљ да сачува одложену пошту током обраде реда чекања и заосталих предмета. То није био рок за поправку нити универзална гаранција испоруке.
• Уобичајена упутства за ограничавање протока Грапх препоручују поштовање Retry-After и експоненцијалног одступања када тај заглавље недостаје; не дијагностикује нити поправља овај инцидент.

Преведени транскрипт

Преведено са оригиналне енглеске нарације. Доступни аудио и титлови контролисани су од стране YouTube-а.

Зашто су враћени сервери поново пропали?

0:00 Мицрософт је вратио сервере е-поште у рад. Могли су поново престати да реагују када се саобраћај вратио. Ево наставка за програмере. У овом видеу, зашто је опоравак стално пропадао? И који делови ваше апликације су и даље радили? Мицрософт је такође дао одложеној е-пошти четрдесет осам сати. Шта вам то заправо доноси? Петак је, тринаести новембар, и ово је The Daily Diff.

0:18 Екцханге Онлине је Мицрософтова хостована услуга е-поште, а друге Мицрософт три

Које су функције зависиле од Екцханге-а?

0:22 шездесет пет функција зависе од ње. Ево корисне разлике са Мицрософтове странице статуса. Позиви и групни чет Теамс-а су углавном радили. Календарске функције и захтеви за податке из поштанског сандучета могли су да пропадну. Проверите зависност коју ваша апликација заправо користи. То значи да састанак и даље може да се деси док календар одбија да сарађује. Директан приступ датотекама у СхареПоинт-у такође је остао функционалан, док су неке функције дељења биле погођене.

0:42 Лого на прозору вам врло мало говори о томе који позадински систем ваш следећи клик захтева. Прекид је почео у четвртак, при чему је Мицрософт првобитно истраживао приступ поштанском сандучету у Америкама. Затим је потврдио да корисници у било ком региону могу бити погођени. ЦНН је известио о проблемима у банкама, владама и судовима. Недостајућа е-пошта је незгодна док нечији стварни посао не зависи од њеног доласка. Мицрософтово рано објашњење био је губитак доступних сервера.

Како недостатак капацитета преоптерећује услугу?

1:06 Посао који су те машине требале да обаве оптеретио је преосталу инфраструктуру. Можете преоптеретити услугу обичном потражњом када њен капацитет нестане. Ред се продужава чак и ако нико није изненада открио страст према слању е-поште. Компанија је затим истраживала аутоматизоване провере здравља. Ове провере помажу да се одлучи да ли сервер може да преузме посао. Мицрософт је рекао да је компонента која обрађује здравље сервера можда умешана. То је хипотеза из истраге која је још увек у току.

1:29 Немамо коначни извештај о инциденту који објашњава зашто су ти сервери први пут постали недоступни. Ажурирања звуче као смена дежурства која све више

Шта је Мицрософт прво покушао?

1:37 губи интерес за доручак. Паузирајте постављања. Преместите саобраћај. Поново покрените сервере. Мицрософт је потврдио алтернативну проверу здравља која је вратила подскуп, и припремио аутоматизоване системе за откривање и поновно покретање неодговорних машина. Свако ажурирање описивало је покушај опоравка капацитета. Затим је дошао ред који објашњава петљу опоравка. Мицрософт је рекао да сервери враћени у рад могу поново постати неодговорни када приме саобраћај.

1:59 Машина би се могла вратити, примити стварни посао и престати да реагује. То запажање је јачи доказ од било чије самоуверене теорије у одговорима. Замислите исти сервер кроз та стања. Недоступно. Враћено у рад. Прима саобраћај. Поново неодговорно. Ово илуструје Мицрософтов извештај. Шта покреће тај последњи прелаз остаје без одговора. Поновно покретање може произвести привремено

2:18 побољшање док стање које спречава сервер остаје нерешено. Савет да се искључи и поново укључи почиње да наплаћује прековремени рад. Инжењери морају да провере шта се дешава након што се посао врати. Купцима је потребна услуга да настави да ради кроз следећи захтев, и онај следећи. Мицрософт је ограничио одређени саобраћај који долази до погођене инфраструктуре на неким локацијама. Такође је поново изградио подскуп сервера користећи претходну конфигурацију да би

2:39 тестирао да ли ће остати одговорни. То су били пријављени експерименти ублажавања. Паузирање постављања током опоравка не даје нам доказ да је постављање у петак изазвало првобитни прекид.

Шта је било познато у тренутку пресека извештавања?

2:48 По Мицрософтовом ажурирању у петак у једанаест и четири УТЦ, акције опоравка су завршене у деловима Азијско-пацифичког региона. Саобраћај се постепено враћао, са побољшањима у приступу поштанском сандучету и обради одложене е-поште. Неки корисници су и даље могли да се суочавају са повременим проблемима, а опоравак другде се наставио. То је наш пресек извештавања. Мицрософт је рекао да нема доказа о злонамерним активностима, и обећао потпун извештај о инциденту након ублажавања.

3:10 Чекао бих тај извештај пре него што доделим кривца. Интернет детективски рад може вам дати кривца пре него што сте чак и завршили освежавање странице. За програмере, Мицрософт Грапх чини зависност посебно лаком за пропуштање.

Зашто један Грапх захтев може да пропадне?

3:20 Његови захтеви за Екцханге пошту, календар и контакте могли су да истекну. Ваша апликација може успешно да позове Грапх за једну операцију и да пропадне на другој. Успешан неповезан захтев вам мало говори о томе да ли ће операција поштанског сандучета коју ваш корисник треба бити завршена. Страница статуса је чак требала сопствени излаз. Мицрософт је јавно објавио информације о инциденту јер администратори можда неће моћи да учитају административни центар да прочитају здравље услуге. Када контролна табла за откривање шта је покварено зависи од онога што је покварено,

3:46 контролна табла се придружила инциденту. Држите везу за статус ван опсега доступном. За обично ограничавање Грапх-а, Мицрософтово упутство каже да се поштује поновно кашњење када захтев добије превише захтева као одговор, и да се користи експоненцијално одступање када тај заглавље недостаје. То упутство управља ограничавањем. Не дијагностикује овај прекид нити обећава да ће поновни покушаји вратити услугу. Сада четрдесет осам сати.

Шта нам доноси 48-часовни прозор за пошту?

4:05 Мицрософтова проширена страница статуса каже да је дала приоритет обради реда чекања и заосталих предмета и продужила прозор временског ограничења за е-пошту како би сачувала одложене поруке. То одложеној пошти купује више времена током опоравка. Поставља прозор временског ограничења за пошту. Мицрософт није дао четрдесетосмочасовни рок за поправку услуге, нити гаранцију да ће свака порука стићи. Зато одржавајте искрене тврдње о испоруци. Одложено обавештење није нужно нестало,

4:28 а порука у реду чекања није нужно стигла до свог примаоца. За временски осетљив посао, проверите исход путем одобреног независног канала. Прозор клијента је оптимистична потврда о испоруци када се позадина још увек опоравља. Што оставља доста за читање у евентуалном извештају о инциденту. Ако више волите да ово читате него да ме чујете, diff стиже у ваше сандуче сваког јутра, бесплатно на the daily diff dot dev, линк испод. Дакле, данашња пресуда, NEEDS REVIEW.

Шта би одрживи опоравак требало да докаже?

4:49 Држао бих опоравак под прегледом јер су Мицрософтова ажурирања показала да се враћени сервери руше под саобраћајем. Користан тест је одржива услуга са стварним послом који пролази. До коначног извештаја, почетни узрок остаје отворен. И то је diff за данас. Ја сам Нико из Axrisi. Спајајте одговорно.

Извори

1. ExpandedMicrosoftservicehealth, reportingcutoffNovember13 11:04:50UTC; earlier10:01:07observationshistoricalMicrosoft
2. Returned servers can become unresponsive again once they receive trafficMicrosoft 365 Status
3. Health-processing component investigation hypothesisMicrosoft 365 Status
4. Alternative health check returned a subset of serversMicrosoft 365 Status
5. Isolate, restart and reintroduce traffic to test stabilityMicrosoft 365 Status
6. Unavailable servers strain remaining infrastructureMicrosoft 365 Status
7. Initial Exchange mailbox-access investigation in the AmericasMicrosoft 365 Status
8. Users in any region may be affectedMicrosoft 365 Status
9. Email timeout extended to preserve delayed messagesMicrosoft 365 Status
10. Paused deployments, traffic redistribution and server restartsMicrosoft 365 Status
11. Independent live reporting on the Microsoft email disruptionCNN
12. Microsoft Graph throttling guidanceMicrosoft Learn
13. Exchange Online service descriptionMicrosoft Learn
14. Satya Nadella portrait by OFFICIAL LEWEB PHOTOS (2013), CC BY 2.0. Whole portrait-based artwork adapted by cropping, background removal, resizing and text/composition; vendor identity only, no endorsement or current reaction.OFFICIAL LEWEB PHOTOS
15. Portrait-only CC BY 2.0 licence; separate from third-party source/cartoon rightsCreative Commons
16. WWE still. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.WWE / Imgflip source hosting
17. The Simpsons/Bob GIF. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.The Simpsons / 20th Television / Disney; GIPHY source hosting