שחזור Outlook של מיקרוסופט המשיך להיכשל תחת עומס תנועה

מה מכסה הסרטון הזה

• בדוק את התלות של כל פעולה ב-backend: רוב הפונקציונליות המרכזית של Teams וגישה ישירה לקבצי SharePoint נותרו פעילות, בעוד תכונות התלויות ב-Exchange נפגעו.
• מיקרוסופט דיווחה כי שרתים שהוחזרו לשירות יכלו להפוך ללא מגיבים שוב כאשר עומס התנועה הגיע אליהם; הסבר רכיב עיבוד הבריאות שלה נותר בגדר השערה.
• פסק הזמן המורחב של ארבעים ושמונה שעות לדוא"ל נועד לשמר דוא"ל מושהה במהלך עיבוד תורים ופיגורים. זו לא הייתה מועד תיקון או ערובה אוניברסלית למסירה.
• הנחיות ויסות Graph רגילות ממליצות לכבד את Retry-After ואת נסיגה מעריכית כאשר כותרת זו חסרה; זה לא מאבחן או מתקן תקלה זו.

תמליל מתורגם

תורגם מהקריינות המקורית באנגלית. זמינות אודיו וכתוביות נשלטת על ידי YouTube.

מדוע שרתים שהוחזרו נכשלו שוב?

0:00 מיקרוסופט החזירה שרתי דוא"ל לשירות. הם יכלו להפסיק להגיב שוב כשתחזור התנועה. הנה העדכון למפתחים. בסרטון זה, מדוע השחזור המשיך להיכשל? ואילו חלקים מהאפליקציה שלך עדיין עבדו? מיקרוסופט גם נתנה לדוא"ל מושהה ארבעים ושמונה שעות. מה זה בעצם קונה לך? זה יום שישי, השלושה עשר בנובמבר, וזה ה-Daily Diff.

0:18 Exchange Online הוא שירות הדוא"ל המאוחסן של מיקרוסופט, ושלוש מאות

אילו תכונות היו תלויות ב-Exchange?

0:22 שישים וחמש תכונות אחרות של מיקרוסופט תלויות בו. הנה ההבחנה השימושית מדף הסטטוס של מיקרוסופט. שיחות צ'אטים קבוצתיים של Teams לרוב עבדו. תכונות לוח שנה ובקשות לנתוני תיבות דוא"ל יכלו להיכשל. בדוק את התלות שהיישום שלך באמת משתמש בה. זה אומר שפגישה עדיין יכולה להתקיים בזמן שלוח השנה מסרב לשתף פעולה. גישה ישירה לקבצים ב-SharePoint גם נותרה פונקציונלית, בעוד שתכונות שיתוף מסוימות נפגעו.

0:42 הלוגו על החלון אומר לך מעט מאוד לגבי איזה Backend הקליק הבא שלך צריך. התקלה החלה ביום חמישי, כשמיקרוסופט חקרה בתחילה גישה לתיבות דוא"ל ביבשת אמריקה. לאחר מכן היא אישרה שמשתמשים בכל אזור יכולים להיות מושפעים. CNN דיווחה על בעיות בבנקים, ממשלות ובתי משפט. דוא"ל חסר אינו נוח עד שעבודתו האמיתית של מישהו תלויה בכך שהוא יגיע. ההסבר המוקדם של מיקרוסופט היה אובדן שרתים זמינים.

כיצד קיבולת חסרה מעמיסה יתר על המידה על שירות?

1:06 העבודה שהמכונות האלה היו צריכות לטפל בה עמסה על התשתית הנותרת. אתה יכול להעמיס יתר על המידה על שירות עם דרישה רגילה כאשר הקיבולת שלו נעלמת. התור מתארך גם אם אף אחד לא גילה פתאום תשוקה לשלוח דוא"ל. לאחר מכן החברה חקרה בדיקות בריאות אוטומטיות. בדיקות אלו עוזרות להחליט אם שרת יכול לקבל עבודה. מיקרוסופט אמרה שרכיב המעבד את בריאות השרת עשוי להיות מעורב. זו השערה מתוך חקירה שעדיין מתנהלת.

1:29 אין לנו דוח אירוע סופי המסביר בדיוק מדוע שרתים אלה הפכו לראשונה ללא זמינים. העדכונים נראים כמו משמרת כוננות שהולכת ופחות

מה ניסתה מיקרוסופט תחילה?

1:37 מתעניינת בארוחת בוקר. השהה פריסות. העבר תנועה. הפעל מחדש שרתים. מיקרוסופט אישרה בדיקת בריאות חלופית שהחזירה תת קבוצה, והכינה מערכות אוטומטיות לזיהוי והפעלה מחדש של מכונות שאינן מגיבות. כל עדכון תיאר ניסיון לשחזר קיבולת. ואז הגיע המשפט המסביר את לולאת השחזור. מיקרוסופט אמרה שהשרתים שהוחזרו לשירות עלולים להפוך ללא מגיבים שוב ברגע שהם יקבלו תנועה.

1:59 מכונה יכלה לחזור, לקבל עבודה אמיתית, ולהפסיק להגיב. תצפית זו היא הוכחה חזקה יותר מכל תיאוריה בטוחה של מישהו בתגובות. דמיין את אותו השרת דרך המצבים האלה. לא זמין. הוחזר לשירות. מקבל תנועה. שוב לא מגיב. זה מדגים את חשבונה של מיקרוסופט. מה שמפעיל את המעבר האחרון נותר ללא מענה. הפעלה מחדש יכולה לייצר שיפור

2:18 זמני בעוד המצב שמכניע את השרת נשאר ללא פתרון. העצה לכבות ולהדליק שוב מתחילה לגבות שעות נוספות. מהנדסים צריכים לבדוק מה קורה לאחר שהעבודה חוזרת. הלקוחות צריכים שהשירות ימשיך לעבוד גם בבקשה הבאה, ובזו שאחריה. מיקרוסופט הגבילה תנועה מסוימת שהגיעה לתשתית המושפעת בחלק מהמיקומים. היא גם בנתה מחדש תת-קבוצה של שרתים באמצעות תצורה קודמת כדי

2:39 לבחון אם הם יישארו מגיבים. אלו היו ניסויי צמצום שדווחו. השהיית פריסות במהלך שחזור לא נותנת לנו הוכחה שפריסה ביום שישי גרמה להשבתה המקורית.

מה היה ידוע במועד סיום הדיווח?

2:48 לפי עדכון יום שישי של מיקרוסופט בשעה אחת עשרה וארבע דקות UTC, פעולות השחזור הסתיימו בחלקים מאסיה פסיפיק. התנועה חזרה בהדרגה, עם שיפורים בגישה לתיבות דוא"ל ועיבוד דוא"ל מושהה. חלק מהמשתמשים עדיין יכלו להתמודד עם בעיות לסירוגין, ושחזור במקומות אחרים נמשך. זהו מועד סיום הדיווח שלנו. מיקרוסופט אמרה שאין לה עדות לפעילות זדונית, והבטיחה דוח אירוע מלא לאחר התיקון.

3:10 הייתי מחכה לדוח הזה לפני שאקבע אשם. עבודת בלשות אינטרנט יכולה לתת לך אשם עוד לפני שסיימת לרענן את הדף. למפתחים, Microsoft Graph הופך את התלות לקלה במיוחד לפספוס.

מדוע בקשת Graph אחת יכלה להיכשל?

3:20 בקשותיו לדוא"ל, לוח שנה ואנשי קשר של Exchange יכלו להסתיים בטיימאאוט. היישום שלך יכול לקרוא ל-Graph בהצלחה עבור פעולה אחת ולהיכשל באחרת. בקשה לא קשורה שהצליחה אומרת לך מעט על אם פעולת תיבת הדוא"ל שהמשתמש שלך צריך תושלם. דף הסטטוס אפילו נזקק למסלול מילוט משלו. מיקרוסופט פרסמה מידע על התקלה באופן פומבי מכיוון שמנהלים יכלו להיות חסרי יכולת לטעון את מרכז הניהול כדי לקרוא את מצב השירות. כאשר לוח המחוונים למציאת מה שבור תלוי במה שבור,

3:46 לוח המחוונים הצטרף לתקלה. שמור קישור מצב מחוץ לרצועה זמין. עבור ויסות Graph רגיל, ההנחיה של מיקרוסופט אומרת לכבד את זמן הניסיון החוזר כאשר בקשה מקבלת תגובה של יותר מדי בקשות, ולהשתמש בנסיגה אקספוננציאלית כאשר כותרת זו חסרה. הנחיה זו מנהלת ויסות. היא אינה מאבחנת תקלה זו או מבטיחה שנסיונות חוזרים ישחזרו שירות. כעת ארבעים ושמונה השעות.

מה מרוויחים מחלון הדוא"ל של 48 שעות?

4:05 דף הסטטוס המורחב של מיקרוסופט אומר שהוא נתן עדיפות לעיבוד תורים ופיגורים והאריך את חלון פסק הזמן של הדוא"ל כדי לשמר הודעות מושהות. זה קונה לדוא"ל מושהה יותר זמן במהלך השחזור. הוא קובע חלון פסק זמן לדוא"ל. מיקרוסופט לא נתנה דדליין של ארבעים ושמונה שעות לתיקון השירות, ולא הבטחה שכל הודעה תגיע. לכן שמור על טענות מסירה כנות. הודעה מושהית לא בהכרח נעלמה,

4:28 והודעה בתור לא בהכרח הגיעה לנמענה. עבור עבודה רגישה לזמן, ודא את התוצאה באמצעות ערוץ עצמאי מאושר. חלון לקוח הוא קבלה אופטימית למסירה כאשר ה-backend עדיין מתאושש. מה שמשאיר הרבה לקרוא בדוח התקלה הסופי. אם אתה מעדיף לקרוא את זה מאשר לשמוע אותי אומר את זה, הדיף נוחת בתיבת הדוא"ל שלך כל בוקר, חינם ב-thedailydiff.dev, קישור למטה. אז פסק הדין של היום, NEEDS REVIEW.

מה נדרש משחזור מתמשך כדי להוכיח?

4:49 הייתי משאיר את השחזור בבדיקה מכיוון שהעדכונים של מיקרוסופט עצמה הראו שרתים שהוחזרו נכשלים תחת עומס תנועה. המבחן השימושי הוא שירות מתמשך עם עבודה אמיתית שעוברת. עד לדוח הסופי, הגורם הראשוני נשאר פתוח. וזה הדיף להיום. אני ניקו מ-Axrisi. מזג באחריות.

מקורות

1. ExpandedMicrosoftservicehealth, reportingcutoffNovember13 11:04:50UTC; earlier10:01:07observationshistoricalMicrosoft
2. Returned servers can become unresponsive again once they receive trafficMicrosoft 365 Status
3. Health-processing component investigation hypothesisMicrosoft 365 Status
4. Alternative health check returned a subset of serversMicrosoft 365 Status
5. Isolate, restart and reintroduce traffic to test stabilityMicrosoft 365 Status
6. Unavailable servers strain remaining infrastructureMicrosoft 365 Status
7. Initial Exchange mailbox-access investigation in the AmericasMicrosoft 365 Status
8. Users in any region may be affectedMicrosoft 365 Status
9. Email timeout extended to preserve delayed messagesMicrosoft 365 Status
10. Paused deployments, traffic redistribution and server restartsMicrosoft 365 Status
11. Independent live reporting on the Microsoft email disruptionCNN
12. Microsoft Graph throttling guidanceMicrosoft Learn
13. Exchange Online service descriptionMicrosoft Learn
14. Satya Nadella portrait by OFFICIAL LEWEB PHOTOS (2013), CC BY 2.0. Whole portrait-based artwork adapted by cropping, background removal, resizing and text/composition; vendor identity only, no endorsement or current reaction.OFFICIAL LEWEB PHOTOS
15. Portrait-only CC BY 2.0 licence; separate from third-party source/cartoon rightsCreative Commons
16. WWE still. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.WWE / Imgflip source hosting
17. The Simpsons/Bob GIF. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.The Simpsons / 20th Television / Disney; GIPHY source hosting