Збій Telstra: помилкова дата в мережі виявила прогалини в контролі критичних систем

Telstra 2 вересня оприлюднила підсумки зовнішнього розслідування аварії, що сталася в її мобільній мережі 8 липня. За викладом оператора, Technology Audit Partners пов’язала масштаб проблеми з тим, що синхронізацію часу не розглядали як критичну функцію, яка потребує найвищого рівня контролю. Повідомлення Telstra.

Як помилка поширилася мережею

За хронологією Telstra, після технічного обслуговування сервер синхронізації перезапустився з неправильною датою через особливість програмної конфігурації. Помилкові дані почали надходити до інших частин мережі, порушуючи роботу голосових викликів і передавання даних.

Оператор повідомляє, що на піку початкова несправність зачепила близько 45% дзвінків і сесій передавання даних. Це показник мережевих операцій, а не частка абонентів. Під час відновлення виявили також окрему проблему з частиною викликів на екстрений номер Triple Zero. Хронологія оператора.

Що виявило розслідування

У вересневому повідомленні Telstra серед недоліків названі нечіткий розподіл відповідальності, брак наскрізного контролю архітектури та прогалини в управлінні змінами. Оператор також визнав, що недостатня видимість стану системи затримала пошук причини на початку аварії.

За словами компанії, після інциденту вона перевела сервіси зі старих NTP-серверів на іншу систему на трьох майданчиках, розширила моніторинг і додала лабораторні перевірки змін. Це заявлені заходи оператора, а не незалежне підтвердження, що всі ризики усунено. Заява про зміни.

Окрема перевірка регулятора

Австралійський регулятор ACMA ще 8 липня оголосив перевірку дотримання Telstra вимог щодо екстрених викликів та інформування про перебої. Це окремий процес: повідомлення про його початок не встановлює порушення й не замінює технічного розслідування. Заява ACMA.

Редакційний висновок: цей випадок дає привід перевірити не лише резервування мережі, а й відповідальність за допоміжні служби, наслідки їхнього перезапуску та здатність моніторингу вчасно помітити неправильний стан.