Збій Google Cloud London: подія з живленням у europe-west2-b та британські сервіси, які "похитнулися"

Що охоплює це відео

• Інцидент Google починається о 07:08 за лондонським часом 20 жовтня 2026 року; протягом кількох годин він описував лише підвищені помилки та періодичні збої мережі в europe-west2, а обхідний шлях наразі був відсутній.
• О 12:12 за лондонським часом Google заявила, що подія з живленням спричинила збій у зоні europe-west2-b; сервіси там були недоступні, а деякі сервіси в інших частинах регіону також спостерігали помилки. В інциденті було перелічено тридцять вісім продуктів.
• Google надала пріоритет відновленню існуючих робочих навантажень, попередила, що нові робочі навантаження можуть бути ще нестворюваними, повідомила про відновлення більшості робочих навантажень о 13:10 за лондонським часом і назвала проблему "пом'якшеною" для більшості клієнтів о 15:03, обіцяючи провести аналіз. На момент перевірки не було опубліковано жодної першопричини, окрім події з живленням.
• Revolut заявила, що проблему спричинив сторонній збій, і що гроші та дані були в безпеці; HSBC заявила, що ситуація також вплинула на інші організації. BBC зазначила, що більшість фірм офіційно не пов'язали свої проблеми з Google.
• Віртуальні машини та зональні диски знаходяться в одній зоні, тому розгортання в одній зоні перетворює відмову зони на повний збій; розподіл по зонах замінює це втратою потужності, за рахунок оплати резервної потужності.
• У липні 2022 року збій охолодження в europe-west2-a також спричинив регіональний вплив; звіт Google зазначив, що внутрішній трафік був перенаправлений з усіх трьох зон замість однієї, що призвело до неможливості доступу сховища до деяких реплік.
• DHS наказала вилучити продукти DeepSeek, а також сторонні продукти, розроблені з використанням реалізацій DeepSeek, з ІТ федеральних цивільних агентств; окремо двигун DeepInfer з відкритим вихідним кодом DeepSeek Apache-2.0 підтримує DeepSeek-V4.1-Flash лише для офлайн-висновків.

Перекладена стенограма

Перекладено з оригінальної англійської розповіді. Доступне аудіо та субтитри контролюються YouTube.

Чи може одна лондонська зона вивести з ладу ваш банківський додаток?

0:00 Ви думаєте, що хмарний регіон виживає, втративши одну будівлю. У вівторок одна зона Google у Лондоні знеструмилася, і британські банківські додатки "впали". У цьому відео: що сказала Google? Чому одна зона зачепила весь регіон? І хто мав резервну копію? Вівторок, двадцяте жовтня, і це The Daily Diff. І цей самий лондонський регіон вже виходив з ладу таким чином. Google написав про це звіт, і цей звіт пояснює сьогоднішнє.

0:23 Я повернуся до цього наприкінці. Google Cloud - це бізнес Google з оренди серверів, баз даних та сховищ. Це одна з трьох великих хмар, поруч з Amazon та Microsoft. Її лондонський регіон називається europe-west2, і він розділений на три зони, щоб одна зона могла "згаснути", поки дві інші продовжують працювати. Цей збій очолює сьогоднішній diff. Потім уряд США наказує вилучити DeepSeek з федеральних агентств,

0:45 а власний сервісний двигун DeepSeek очолює Hacker News. Ось власна сторінка статусу Google.

Що насправді говорила сторінка статусу Google?

0:50 Проблема почалася о 7:08 ранку, за лондонським часом. Протягом годин єдиним описом були підвищені помилки та періодичні збої мережі в europe-west2. Під "обхідним шляхом" було написано "наразі відсутній". Кожна позначка часу на цій сторінці вказана за тихоокеанським часом, для збою в Лондоні. Один коментатор Hacker News ввічливо це помітив. Пізніше обхідний шлях змінився на такий.

1:12 Перемістіть своє робоче навантаження в іншу зону або регіон, якщо це можливо. О дванадцять хвилин пополудні, причина.

Чому одна зона зачепила весь регіон?

1:18 Подія з живленням вивела з ладу зону europe-west2-b. Google каже, що її сервіси були недоступні в цій зоні, а деякі сервіси в решті регіону також спостерігали помилки. Тридцять вісім продуктів перелічено в інциденті. По-перше, Google заявила, що проблему з живленням було усунуто. Потім вона надала пріоритет існуючим робочим навантаженням над новими, і попередила, що клієнти можуть ще не мати змоги створювати нові робочі навантаження. До десяти хвилин на першу більшість робочих навантажень відновлювалися, і відразу після третьої години пополудні Google

1:43 назвала це "пом'якшеним" для більшості клієнтів. Потім клієнти.

Хто вийшов з ладу і хто про це сказав?

1:48 Revolut повідомив BBC, що у нього стався збій у роботі сервісів, спричинений третьою стороною, і що гроші та дані були в безпеці. HSBC вибачився і сказав, що інші організації також постраждали. Lloyds заявив, що його додаток працював, хоча у деяких людей були проблеми. Понад півтори тисячі людей повідомили про проблеми з Revolut на Downdetector невдовзі після восьмої. Судова служба заявила, що її відеозв'язок для віддалених засідань постраждав. BBC зазначає, що більшість фірм офіційно не пов'язали свої проблеми з Google.

Чи вижив би ваш додаток в одній "темній" зоні?

2:15 Ось частина, яку ви контролюєте. Віртуальна машина або зональний диск знаходиться рівно в одній зоні. Якщо весь ваш банк знаходиться в зоні b, подія з живленням - це ваш збій. Розподіліть його між a та c, і ви втратите потужність замість клієнтів. Ця резервна потужність коштує грошей, тому багато команд її пропускають. Monzo написав більшу версію. Його основний банк працює в хмарі Amazon, а окрема резервна система в Google може підтримувати платежі картками та перекази.

2:42 На Hacker News один коментатор припускає, що правила даних Великої Британії підштовхнули фірми до одного регіону. Ніхто цього не підтвердив. Тепер інша історія.

Чому DeepSeek заборонено та популярно в один і той же день?

2:49 Міністерство внутрішньої безпеки наказало вилучити DeepSeek з федеральних цивільних агентств, і наказ "приземляється" у Федеральному реєстрі сьогодні. Він охоплює власні продукти DeepSeek, а також сторонні продукти, побудовані з використанням реалізацій DeepSeek. Якщо ви продаєте програмне забезпечення агентствам США, прочитайте цю статтю, перш ніж включати модель DeepSeek у свій продукт. У день, коли заборона потрапила до Федерального реєстру, щойно відкритий двигун висновків DeepSeek, DeepInfer, потрапив на вершину Hacker News. DeepSeek каже, що це двигун, який стоїть за її власними виробничими послугами,

3:18 під Apache 2.0. Він запускає одну модель, V4.1 Flash, на центрі обробки даних Nvidia Blackwell GPU або чіпах Huawei Ascend, і лише для офлайн-висновків. Система кешу KV та балансування навантаження відсутні в цьому випуску, отже, ви отримуєте двигун без решти автомобіля. Цікавий перемикач - режим, незалежний від пакетів. Увімкніть його, і результати залишаться ідентичними незалежно від того, які інші запити використовують пакет, лише на Nvidia.

3:43 Тепер цей звіт.

Чого навчила Google остання лондонська аварія?

3:44 У липні 2022 року в центрі обробки даних, що розміщує зону a цього самого регіону, відмовило охолодження. Google визнала, що регіональні сервіси також постраждали. Її власна зміна трафіку відвела внутрішні сервіси від усіх трьох зон замість однієї, тому сховище не могло дістатися до жодної копії деяких даних. Сьогодні це була потужність, і Google каже, що повний аналіз буде. Тоді Google пообіцяла негайні кроки для покращення стійкості цього регіону. Знову одна зона "згасла", і деякі сервіси по всьому регіону також видавали помилки.

4:14 Мій вердикт - "потребує перегляду".

Вердикт: чи потребує лондонський регіон Google перегляду?

4:16 Втрата живлення зоною - це саме те, для чого існують зони. Я хочу, щоб звіт Google пояснив, чому решта Лондона знову похитнулася, і я хочу, щоб ваш банк пояснив, чому однієї зони було достатньо. Скажіть мені в коментарях, чи поставили б ви іншу оцінку. Якщо ви волієте прочитати це, ніж почути від мене, "diff" надходить у вашу поштову скриньку щоранку, безкоштовно на thedailydiff.dev, посилання нижче. І це "diff" на сьогодні. Я Ніко з Axrisi.

4:37 Об'єднуйте відповідально.

Джерела

1. Multiple services are experiencing issues in the europe-west2 region (incident Xs2XTHzAVC9YnafnPyzj)Google Cloud Service Health
2. Google Cloud says 'power event' behind outage hitting UK banks and websitesBBC News
3. Google Cloud says outage affecting banks and court video links caused by 'power event' (live)BBC News
4. Incident report: multiple Cloud products in europe-west2, July 2022Google Cloud Service Health
5. Regions and zonesGoogle Cloud documentation
6. Tolerating full cloud outages with Monzo Stand-inMonzo
7. Google cloud outage takes down banks (discussion)Hacker News
8. Notice of Order Regarding Exclusion and Removal of DeepSeek Products (2026-21447)U.S. Department of Homeland Security · Federal Register
9. DeepInferDeepSeek on GitHub