Η ανάκτηση του Outlook της Microsoft αποτύγχανε συνεχώς υπό συνθήκες κίνησης

Τι καλύπτει αυτό το βίντεο

• Ελέγξτε την εξάρτηση υποστήριξης κάθε λειτουργίας: οι περισσότερες βασικές λειτουργίες του Teams και η άμεση πρόσβαση σε αρχεία του SharePoint παρέμειναν λειτουργικές, ενώ οι λειτουργίες που εξαρτώνται από το Exchange επηρεάστηκαν.
• Η Microsoft ανέφερε ότι οι εξυπηρετητές που επανήλθαν θα μπορούσαν να γίνουν ξανά μη ανταποκρινόμενοι όταν δεχόταν κίνηση. Η εξήγηση του συστατικού επεξεργασίας υγείας παρέμεινε υπόθεση.
• Η εκτεταμένη προθεσμία email σαράντα οκτώ ωρών είχε σκοπό να διατηρήσει την καθυστερημένη αλληλογραφία κατά την επεξεργασία ουράς και εκκρεμοτήτων. Δεν ήταν προθεσμία επισκευής ή καθολική εγγύηση παράδοσης.
• Η συνήθης καθοδήγηση περιορισμού του Graph συνιστά την τήρηση του Retry-After και της εκθετικής παύσης όταν αυτή η κεφαλίδα απουσιάζει. Δεν διαγιγνώσκει ούτε επιδιορθώνει αυτό το περιστατικό.

Μεταφρασμένη μεταγραφή

Μεταφράστηκε από την πρωτότυπη αγγλική αφήγηση. Ο διαθέσιμος ήχος και οι υπότιτλοι ελέγχονται από το YouTube.

Γιατί οι εξυπηρετητές που επανήλθαν απέτυχαν ξανά;

0:00 Η Microsoft επανέφερε τους διακομιστές ηλεκτρονικού ταχυδρομείου σε λειτουργία. Μπορούσαν να σταματήσουν να ανταποκρίνονται ξανά όταν επανερχόταν η κίνηση. Εδώ είναι η συνέχεια για τους προγραμματιστές. Σε αυτό το βίντεο, γιατί η ανάκτηση συνέχισε να αποτυγχάνει; Και ποια μέρη της εφαρμογής σας εξακολουθούσαν να λειτουργούν; Η Microsoft έδωσε επίσης στην καθυστερημένη ηλεκτρονική αλληλογραφία σαράντα οκτώ ώρες. Τι σας προσφέρει αυτό στην πραγματικότητα; Είναι Παρασκευή, δεκατρείς Νοεμβρίου, και αυτό είναι το The Daily Diff.

0:18 Το Exchange Online είναι η υπηρεσία φιλοξενίας ηλεκτρονικού ταχυδρομείου της Microsoft, και άλλες λειτουργίες του Microsoft 365

Ποιες λειτουργίες εξαρτώνταν από το Exchange;

0:22 εξαρτώνται από αυτό. Εδώ είναι η χρήσιμη διάκριση από τη σελίδα κατάστασης της Microsoft. Οι κλήσεις και οι ομαδικές συνομιλίες του Teams λειτουργούσαν κυρίως. Οι λειτουργίες ημερολογίου και τα αιτήματα για δεδομένα γραμματοκιβωτίου μπορούσαν να αποτύχουν. Ελέγξτε την εξάρτηση που χρησιμοποιεί πραγματικά η εφαρμογή σας. Αυτό σημαίνει ότι μια συνάντηση μπορεί να πραγματοποιηθεί ενώ το ημερολόγιο αρνείται να συνεργαστεί. Η άμεση πρόσβαση σε αρχεία στο SharePoint παρέμεινε επίσης λειτουργική, ενώ ορισμένες λειτουργίες κοινής χρήσης επηρεάστηκαν.

0:42 Το λογότυπο στο παράθυρο σας λέει πολύ λίγα για το ποιο backend χρειάζεται το επόμενο κλικ σας. Η διακοπή ξεκίνησε την Πέμπτη, με τη Microsoft να διερευνά αρχικά την πρόσβαση σε γραμματοκιβώτια στην Αμερική. Στη συνέχεια επιβεβαίωσε ότι οι χρήστες σε οποιαδήποτε περιοχή θα μπορούσαν να επηρεαστούν. Το CNN ανέφερε προβλήματα σε τράπεζες, κυβερνήσεις και δικαστήρια. Ένα χαμένο email είναι ενοχλητικό μέχρι η πραγματική εργασία κάποιου να εξαρτάται από την άφιξή του. Η αρχική εξήγηση της Microsoft ήταν η απώλεια διαθέσιμων διακομιστών.

Πώς η έλλειψη χωρητικότητας υπερφορτώνει μια υπηρεσία;

1:06 Η εργασία που έπρεπε να είχαν χειριστεί αυτές οι μηχανές επιβάρυνε την υπόλοιπη υποδομή. Μπορείτε να υπερφορτώσετε μια υπηρεσία με συνηθισμένη ζήτηση όταν εξαφανιστεί η χωρητικότητά της. Η ουρά μεγαλώνει ακόμα κι αν κανείς δεν έχει ξαφνικά ανακαλύψει ένα πάθος για την αποστολή email. Η εταιρεία στη συνέχεια διερεύνησε αυτοματοποιημένους ελέγχους υγείας. Αυτοί οι έλεγχοι βοηθούν να αποφασιστεί εάν ένας διακομιστής μπορεί να αναλάβει εργασία. Η Microsoft είπε ότι ένα συστατικό που επεξεργάζεται την υγεία του διακομιστή μπορεί να εμπλέκεται. Αυτή είναι μια υπόθεση από μια έρευνα που είναι ακόμη σε εξέλιξη.

1:29 Δεν έχουμε τελική αναφορά περιστατικού που να εξηγεί ακριβώς γιατί αυτοί οι διακομιστές έγιναν αρχικά μη διαθέσιμοι. Οι ενημερώσεις διαβάζονται σαν μια βάρδια εφημερίας που γίνεται

Τι δοκίμασε πρώτα η Microsoft;

1:37 σταδιακά λιγότερο ενδιαφέρουσα για το πρωινό. Παύση αναπτύξεων. Μετακίνηση κίνησης. Επανεκκίνηση διακομιστών. Η Microsoft επικύρωσε έναν εναλλακτικό έλεγχο υγείας που επανέφερε ένα υποσύνολο, και προετοίμασε αυτοματοποιημένα συστήματα για τον εντοπισμό και την επανεκκίνηση μη ανταποκρινόμενων μηχανών. Κάθε ενημέρωση περιέγραφε μια προσπάθεια ανάκτησης της χωρητικότητας. Τότε ήρθε η γραμμή που εξηγεί τον κύκλο ανάκτησης. Η Microsoft δήλωσε ότι οι διακομιστές που επανήλθαν σε λειτουργία θα μπορούσαν να γίνουν ξανά μη ανταποκρινόμενοι μόλις λάμβαναν κίνηση.

1:59 Μια μηχανή θα μπορούσε να επανέλθει, να λάβει πραγματική εργασία και να σταματήσει να ανταποκρίνεται. Αυτή η παρατήρηση είναι ισχυρότερη από κάθε σίγουρη θεωρία στις απαντήσεις. Φανταστείτε τον ίδιο διακομιστή μέσω αυτών των καταστάσεων. Μη διαθέσιμος. Επανήλθε σε λειτουργία. Λήψη κίνησης. Ξανά μη ανταποκρινόμενος. Αυτό απεικονίζει την αφήγηση της Microsoft. Τι πυροδοτεί αυτή την τελευταία μετάβαση παραμένει αναπάντητο. Μια επανεκκίνηση μπορεί να παράγει μια προσωρινή

2:18 βελτίωση, ενώ η κατάσταση που καταστρέφει τον διακομιστή παραμένει άλυτη. Η συμβουλή να το απενεργοποιήσετε και να το ενεργοποιήσετε ξανά αρχίζει να χρεώνει υπερωρίες. Οι μηχανικοί πρέπει να ελέγξουν τι συμβαίνει αφού επιστρέψει η εργασία. Οι πελάτες χρειάζονται η υπηρεσία να συνεχίσει να λειτουργεί μέσω του επόμενου αιτήματος, και του επόμενου. Η Microsoft περιόρισε ορισμένη κίνηση που έφτανε την επηρεαζόμενη υποδομή σε ορισμένες τοποθεσίες. Επίσης, αναδημιούργησε ένα υποσύνολο διακομιστών χρησιμοποιώντας μια προηγούμενη διαμόρφωση για να

2:39 δοκιμάσει αν θα παρέμεναν ανταποκρινόμενοι. Αυτά αναφέρθηκαν ως πειράματα μετριασμού. Η παύση των αναπτύξεων κατά την ανάκτηση δεν μας δίνει στοιχεία ότι μια ανάπτυξη της Παρασκευής προκάλεσε την αρχική διακοπή.

Τι ήταν γνωστό κατά την προθεσμία αναφοράς;

2:48 Μέχρι την ενημέρωση της Microsoft την Παρασκευή στις 11:04 UTC, οι ενέργειες ανάκαμψης είχαν ολοκληρωθεί σε τμήματα της Ασίας-Ειρηνικού. Η κίνηση επανερχόταν σταδιακά, με βελτιώσεις στην πρόσβαση σε γραμματοκιβώτια και την καθυστερημένη επεξεργασία email. Ορισμένοι χρήστες ενδέχεται να αντιμετωπίζουν ακόμη διακοπτόμενα ζητήματα, και η ανάκαμψη αλλού συνεχίστηκε. Αυτή είναι η προθεσμία αναφοράς μας. Η Microsoft δήλωσε ότι δεν είχε στοιχεία κακόβουλης δραστηριότητας, και υποσχέθηκε πλήρη αναφορά περιστατικού μετά τον μετριασμό.

3:10 Θα περίμενα αυτή την αναφορά πριν αποδώσω έναν κακοποιό. Η διαδικτυακή αστυνομική εργασία μπορεί να σας δώσει έναν ένοχο πριν ακόμη τελειώσετε την ανανέωση της σελίδας. Για τους προγραμματιστές, το Microsoft Graph κάνει την εξάρτηση ιδιαίτερα εύκολο να παραβλεφθεί.

Γιατί ένα αίτημα Graph θα μπορούσε να αποτύχει;

3:20 Τα αιτήματά του για αλληλογραφία, ημερολόγιο και επαφές του Exchange θα μπορούσαν να λήξουν. Η εφαρμογή σας μπορεί να καλέσει το Graph επιτυχώς για μια λειτουργία και να αποτύχει σε άλλη. Ένα επιτυχημένο άσχετο αίτημα σας λέει λίγα για το αν η λειτουργία γραμματοκιβωτίου που χρειάζεται ο χρήστης σας θα ολοκληρωθεί. Η σελίδα κατάστασης χρειαζόταν ακόμη και τη δική της διαδρομή διαφυγής. Η Microsoft δημοσίευσε πληροφορίες περιστατικού δημόσια, επειδή οι διαχειριστές ενδέχεται να μην μπορούν να φορτώσουν το κέντρο διαχείρισης για να διαβάσουν την υγεία της υπηρεσίας. Όταν ο πίνακας ελέγχου για την εύρεση του τι είναι χαλασμένο εξαρτάται από το τι είναι χαλασμένο,

3:46 ο πίνακας ελέγχου έχει συμμετάσχει στο περιστατικό. Διατηρήστε έναν σύνδεσμο κατάστασης εκτός ζώνης διαθέσιμο. Για τον συνήθη περιορισμό του Graph, η καθοδήγηση της Microsoft λέει να τηρείτε την καθυστέρηση επανάληψης όταν ένα αίτημα λαμβάνει μια απάντηση 'πολλά αιτήματα', και να χρησιμοποιείτε εκθετική παύση όταν αυτή η κεφαλίδα απουσιάζει. Αυτή η καθοδήγηση διαχειρίζεται τον περιορισμό. Δεν διαγιγνώσκει αυτή τη διακοπή λειτουργίας ούτε υπόσχεται ότι οι επαναλήψεις αποκαθιστούν την υπηρεσία. Τώρα τις σαράντα οκτώ ώρες.

Τι προσφέρει το παράθυρο αλληλογραφίας 48 ωρών;

4:05 Η διευρυμένη σελίδα κατάστασης της Microsoft αναφέρει ότι έδωσε προτεραιότητα στην επεξεργασία ουράς και εκκρεμοτήτων και επέκτεινε το παράθυρο λήξης χρονικού ορίου του email για να διατηρήσει τα καθυστερημένα μηνύματα. Αυτό δίνει στα καθυστερημένα μηνύματα περισσότερο χρόνο κατά την ανάκτηση. Θέτει ένα παράθυρο λήξης χρονικού ορίου αλληλογραφίας. Η Microsoft δεν έδωσε προθεσμία σαράντα οκτώ ωρών για την επιδιόρθωση της υπηρεσίας, και καμία εγγύηση ότι κάθε μήνυμα θα έφτανε. Οπότε κρατήστε τις αξιώσεις παράδοσης ειλικρινείς. Μια καθυστερημένη ειδοποίηση δεν έχει απαραίτητα εξαφανιστεί,

4:28 και ένα μήνυμα στην ουρά δεν έχει απαραίτητα φτάσει στον παραλήπτη του. Για εργασίες ευαίσθητες στο χρόνο, επαληθεύστε το αποτέλεσμα μέσω ενός εγκεκριμένου ανεξάρτητου καναλιού. Ένα παράθυρο πελάτη είναι μια αισιόδοξη απόδειξη παράδοσης όταν το backend είναι ακόμα σε ανάκαμψη. Το οποίο αφήνει πολλά να διαβάσετε στην τελική αναφορά περιστατικού. Αν προτιμάτε να το διαβάσετε αυτό παρά να με ακούσετε να το λέω, το diff φτάνει στα εισερχόμενά σας κάθε πρωί, δωρεάν στο thedailydiff.dev, σύνδεσμος παρακάτω. Οπότε η σημερινή ετυμηγορία, ΧΡΕΙΑΖΕΤΑΙ ΕΛΕΓΧΟ.

Τι θα χρειαζόταν να αποδείξει μια διαρκής ανάκαμψη;

4:49 Θα κρατούσα την ανάκαμψη υπό εξέταση επειδή οι ίδιες οι ενημερώσεις της Microsoft έδειξαν ότι οι εξυπηρετητές που επανήλθαν αποτύγχαναν υπό συνθήκες κίνησης. Η χρήσιμη δοκιμή είναι η διαρκής υπηρεσία με πραγματική εργασία να περνάει. Μέχρι την τελική αναφορά, η αρχική αιτία παραμένει ανοιχτή. Και αυτή είναι η διαφορά για σήμερα. Είμαι ο Νίκος από την Axrisi. Συγχωνεύστε υπεύθυνα.

Πηγές

1. ExpandedMicrosoftservicehealth, reportingcutoffNovember13 11:04:50UTC; earlier10:01:07observationshistoricalMicrosoft
2. Returned servers can become unresponsive again once they receive trafficMicrosoft 365 Status
3. Health-processing component investigation hypothesisMicrosoft 365 Status
4. Alternative health check returned a subset of serversMicrosoft 365 Status
5. Isolate, restart and reintroduce traffic to test stabilityMicrosoft 365 Status
6. Unavailable servers strain remaining infrastructureMicrosoft 365 Status
7. Initial Exchange mailbox-access investigation in the AmericasMicrosoft 365 Status
8. Users in any region may be affectedMicrosoft 365 Status
9. Email timeout extended to preserve delayed messagesMicrosoft 365 Status
10. Paused deployments, traffic redistribution and server restartsMicrosoft 365 Status
11. Independent live reporting on the Microsoft email disruptionCNN
12. Microsoft Graph throttling guidanceMicrosoft Learn
13. Exchange Online service descriptionMicrosoft Learn
14. Satya Nadella portrait by OFFICIAL LEWEB PHOTOS (2013), CC BY 2.0. Whole portrait-based artwork adapted by cropping, background removal, resizing and text/composition; vendor identity only, no endorsement or current reaction.OFFICIAL LEWEB PHOTOS
15. Portrait-only CC BY 2.0 licence; separate from third-party source/cartoon rightsCreative Commons
16. WWE still. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.WWE / Imgflip source hosting
17. The Simpsons/Bob GIF. Brief silent process commentary; WWE, The Simpsons/20th Television/Disney, Microsoft and other source owners retain copyright. Hosting and this specific editorial-use decision provide no blanket reuse grant or copyright clearance. The portrait licence is separate from third-party source/cartoon rights.The Simpsons / 20th Television / Disney; GIPHY source hosting