Отключение 2022 года затронуло интернет-провайдеров с оптовым доступом к сети Rogers, таких как TekSavvy [5], а также различные другие информационные системы по всей стране, которые полагались на сеть Rogers, включая Interac (это привело к тому, что предприятия по всей стране не смогли принимать дебетовые транзакции), OLG [ 6] и некоторые федеральные государственные службы. Отключение наблюдали несколько международных организаций веб-мониторинга.
Это событие подтолкнуло правительство к принятию новой политики, требующей от всех поставщиков телекоммуникационных услуг оказывать друг другу взаимную помощь в случае сбоев, предлагать услуги экстренного роуминга для пострадавших клиентов конкурентов и разрабатывать планы информирования общественности об отключениях. [3]
Скидки для клиентов оцениваются в 28 миллионов долларов [4] - 70 миллионов долларов [7] Разделение физических и беспроводных линий на 261 миллион долларов и выдача 150 миллионов долларов в виде кредитов клиентам стали частью плана Rogers стоимостью 10 миллиардов долларов на трехлетний период, включающего усиление управления и дополнительное использование искусственного интеллекта для контроля потенциальных будущих ошибок [8] Экономические потери для канадской экономики за период отключения прогнозировались в размере 142 миллионов долларов [9]
Сбой оказал значительное влияние на различные информационные системы по всей стране, многие из которых охватывали не только частных и коммерческих клиентов Rogers, но и их зависимость от инфраструктуры Rogers:
По данным британской организации по кибербезопасности Netblocks , около 25% населения Канады лишились подключения к Интернету . [11] [12] Пострадало более 12 миллионов абонентов. [3]
Interac был отключен от сети из-за сбоя, что не позволило всем предприятиям по всей стране принимать транзакции по дебетовым картам , независимо от их интернет-провайдера. Некоторые магазины временно закрылись. [5]
Сбой помешал возможности использования услуг 911 с мобильных телефонов в сети Rogers, [5] что привело к как минимум одному сообщенному случаю смерти. Неясно, можно ли было бы избежать смерти, если бы был возможен контакт с 911. [13]
Наряду с невозможностью принимать дебетовые платежи, о которой упоминалось выше, некоторые агентства общественного транспорта сообщили о других проблемах с компьютерными системами, связанных с отключением. [5]
Канадская федерация независимого бизнеса (CFIB) сообщила, что малые предприятия потеряли от нескольких сотен до нескольких тысяч долларов. [15]
В Торонто была некоторая зависимость от Rogers. Четверть всех светофоров полагались на их сотовую сеть для изменения времени сигнала. Сеть GSM Rogers также использовалась для удаленного мониторинга пожарной сигнализации и спринклеров в муниципальных зданиях. Плата за общественную парковку и общественные велосипедные услуги также были недоступны. Это был также единственный поставщик кабельного телевидения для города. [16]
Канадский певец и автор песен The Weeknd был вынужден отложить концерт в тот вечер в Rogers Centre в Торонто в рамках тура After Hours til Dawn из-за «перебоев в обслуживании, повлиявших на работу площадки». [18] Позднее концерт был перенесен на 22 сентября 2022 года. Второе шоу в Rogers Centre было добавлено на 23 сентября. [19]
Восстановление
Rogers начал медленно восстанавливать обслуживание в тот вечер, но генеральный директор Тони Стаффиери заявил, что нет никаких предположительных сроков, когда обслуживание снова станет полностью работоспособным. [20] На следующий день Rogers заявил, что восстановил обслуживание «подавляющего большинства» своих клиентов; однако не все обслуживание было восстановлено по всей стране. [21] 11 июля в компанию по мониторингу веб-трафика Ookla Downdetector поступило сообщение о всплеске проблем с обслуживанием , при этом некоторые пользователи сообщили, что обслуживание у них не восстановилось. [22] [23]
Причины
В отчете Cloudflare говорилось, что сбой был вызван внутренними, а не внешними причинами. В нем были выявлены всплески обновлений BGP , а также отмена префиксов IP , отмечая, что Rogers не афишировал свое присутствие, из-за чего другие сети не находили сеть Rogers. [1] По состоянию на следующий день после сбоя причина оставалась неизвестной. Министерство общественной безопасности Канады заявило, что это не была кибератака . [24] Позднее сообщалось, что сбой был вызван обновлением технического обслуживания, которое привело к сбоям в работе маршрутизаторов. [25] Похожий сбой произошел в апреле 2021 года, который был приписан обновлению программного обеспечения. [4]
Посмертно
В письме в CRTC компания Rogers заявила, что удаление фильтра маршрутизации на ее маршрутизаторах распределения привело к тому, что все возможные маршруты в Интернет прошли через маршрутизаторы, что превысило пропускную способность маршрутизаторов в ее основной сети. Удаление произошло во время шестой фазы в семифазном обновлении ее основной IP-сети. Сбой произошел в 4:45 утра и привел к общенациональной потере доступа к телефонным и интернет-услугам компании, а также к внутреннему доступу к системам, таким как VPN компании, к ее основным сетевым узлам, что затруднило возможность сотрудников компании мобилизовать команду и выявить проблему. Некоторые сотрудники смогли подключиться через «аварийные SIM-карты» в альтернативных сетях, которые у них были из-за практики, установленной посредством взаимных соглашений, заключенных с другими операторами в 2015 году. Другие отправились в централизованные места, чтобы установить сетевой доступ.
В 6 утра технический директор компании Хорхе Фернандес, которого с тех пор заменили, связался с руководством конкурирующих компаний Bell и Telus , сообщив им о проблемах, с которыми они столкнулись, а также предупредив «остерегаться возможных кибератак». Оба конкурента предложили помощь Rogers, хотя компания определила, что переключить своих пользователей на альтернативные сети невозможно, сославшись на невозможность доступа к своей базе данных пользователей, а также на избыточную нагрузку, которую внезапное добавление более 10 миллионов пользователей создаст на других сетях. Меморандум о взаимопонимании о том, как операторы могут работать вместе в будущем, был представлен в сентябре министру инноваций, науки и экономического развития. [26] Rogers планирует физически разделить свои беспроводные и проводные основные сети, чтобы помочь смягчить последствия будущих отключений. [27]
Реакции
Критики привели отключение в качестве примера влияния канадской телекоммуникационной олигополии и аргумента против предлагаемого Rogers приобретения Shaw Communications (что еще больше консолидировало бы отрасль). [28] [20] Лидер НДП Джагмит Сингх обвинил правительство Либеральной партии в «защите прибылей телекоммуникационных гигантов», [29] в то время как депутат -консерватор Мишель Ремпель Гарнер призвала к расследованию, утверждая, что «учитывая критически важную инфраструктуру, которая пострадала, и то, что сама Канадская комиссия по радио, телевидению и телекоммуникациям (CRTC) пострадала, причина отключения Rogers должна быть немедленно объяснена». [29] Представитель CRTC пообещал, что организация изучит отключение и «примет необходимые меры, чтобы предотвратить его повторение». [11]
Критики также подчеркнули важность диверсификации телекоммуникационных услуг для потребителей и предприятий, например, заключения компаниями резервных контрактов на обслуживание с несколькими провайдерами, а также снижения зависимости потребителей от комплексных пакетов услуг «все в одном» — кабельного телевидения, интернета и телефонии. [29]
Ответ
Rogers планировал возместить клиентам пять дней отсутствия обслуживания, которые должны были быть возмещены 1 августа. [27] [30] 10 июля 2022 года Тони Стаффиери, президент и генеральный директор Rogers Communications, отправил всем клиентам электронное письмо с официальными извинениями за инцидент и сообщил им, что Rogers возместит счета всех клиентов за пятницу. [31] [32] В последний раз они возместили потребителям компенсацию в таком масштабе вскоре после отключения 19 апреля 2021 года, когда «беспроводные звонки, SMS и услуги передачи данных были отключены по всей Канаде почти целый день из-за проблемы с обновлением программного обеспечения». [33]
8 июля, в тот же день, когда произошло отключение, было отправлено внутреннее электронное письмо с просьбой к торговым точкам убрать вывески с лозунгом «Самая надежная сеть 5G в Канаде». [34]
11 июля генеральные директора Rogers, Bell , Telus , Shaw , Vidéotron , SaskTel и EastLink были приглашены принять участие в телефонной конференции с федеральным министром кабинета Франсуа-Филиппом Шампаньем для обсуждения новой структуры «взаимопомощи» сотрудничества между компаниями в чрезвычайных ситуациях для предотвращения повторения подобного инцидента в будущем. [35] В тот же день Шампань объявил о новой политике, требующей от всех поставщиков телекоммуникационных услуг оказывать друг другу взаимную помощь в случае сбоя, предлагать услуги экстренного роуминга для пострадавших клиентов конкурентов и разрабатывать планы того, как информировать общественность об указанных инцидентах. Шампань сказал, что у компаний будет 60 дней для достижения соглашений друг с другом по этому вопросу. [3]
В Высший суд Квебека был подан коллективный иск , в котором требовалось, чтобы все клиенты получили скидку в размере 400 долларов. В качестве причин называлась халатность в отношении правил CRTC, согласно которым звонки по номеру 9-1-1 должны быть доступны в любое время. [37] [34]
CFIB попросила Роджерса предоставить бесплатный месяц обслуживания для компенсации убытков другим лицам. [7]
В результате отключения городское правительство Торонто пересмотрело свой унаследованный контракт на поставку с различными поставщиками. Были запланированы заседания совета для рассмотрения полной стоимости для экономики и возможности использования локального ConnectTO в городской инфраструктуре вместо этого в будущем. [16]
21 июля было сообщено, что главный технический и информационный директор Хорхе Фернандес будет заменен Роном Маккензи, бывшим президентом Rogers for Business. Руководящая команда была обновлена накануне вечером на веб-сайте Rogers, чтобы отразить это изменение. [38]
^ ab Томе, Жуан; Стрикс, Том; Чжан, Минвэй (8 июля 2022 г.). «Точка зрения Cloudflare на отключение Rogers Communications в Канаде». Блог Cloudflare . Архивировано из оригинала 9 июля 2022 г. Получено 9 июля 2022 г.
^ «Rogers начинает восстанавливать обслуживание после сбоя, генеральный директор приносит извинения клиентам». Cornwall Seaway News . 9 июля 2022 г. Получено 10 июля 2022 г.[ постоянная мертвая ссылка ]
^ abcd «Оттава объявляет, что потребует от телекоммуникационных компаний предоставлять резервное копирование друг другу во время отключений после сбоя системы Rogers». thestar.com . 11 июля 2022 г. Архивировано из оригинала 12 июля 2022 г. Получено 12 июля 2022 г.
^ abc Эванс, Пит (8 июля 2022 г.). «Роджерс говорит, что услуги в основном восстановлены после однодневного отключения, из-за которого миллионы людей остались в офлайне». CBC News . Архивировано из оригинала 11 июля 2022 г. . Получено 11 июля 2022 г. .
^ abcd da Silva, Michelle; Augustin, Mathilde (8 июля 2022 г.). «Отключение Rogers нарушило работу служб по всей Канаде. Список того, что пострадало». The Globe and Mail . Архивировано из оригинала 9 июля 2022 г. . Получено 9 июля 2022 г. .
^ «Rogers заявляет, что восстановил обслуживание «подавляющего большинства» клиентов». thestar.com . 8 июля 2022 г. Архивировано из оригинала 4 сентября 2022 г. Получено 4 сентября 2022 г.
^ ab Alini, Erica; Hannay, Chris (12 июля 2022 г.). «Потребители и предприятия, как ожидается, подадут на Роджерса в суд из-за сбоя в работе сети». The Globe and Mail . Архивировано из оригинала 13 июля 2022 г. Получено 13 июля 2022 г. – через www.theglobeandmail.com.
^ «Rogers потратит 261 млн долларов на разделение сетей, но не может количественно оценить экономические последствия отключения». CTVNews . 25 августа 2022 г. Получено 3 ноября 2022 г.
^ Bloomberg, BNN (12 июля 2022 г.). «Роджерс обещает пятидневные кредиты, пока Bay Street оценивает последствия отключения - BNN Bloomberg». BNN .
^ «Оценка надежности и устойчивости Rogers Networks после отключения 8 июля 2022 г. — Краткое изложение». 4 июля 2024 г.
^ ab "Генеральный директор Rogers извинился за масштабный сбой в работе сервиса, виня в этом техническое обслуживание". CBC News . 9 июля 2022 г. Архивировано из оригинала 9 июля 2022 г. Получено 9 июля 2022 г.
^ "Netblocks tweet on Rogers outage". Twitter . 8 июля 2022 г. Архивировано из оригинала 8 июля 2022 г. Получено 10 июля 2022 г.
^ Христова, Бобби (12 июля 2022 г.). «Житель Гамильтона не смог позвонить в 911 во время отключения Роджерса, так как его сестра умирала». CBC News . Архивировано из оригинала 12 июля 2022 г. Получено 12 июля 2022 г.
^ Лопес-Мартинес, Мелисса; Ли, Майкл (8 июля 2022 г.). «Rogers wireless services „начинает восстанавливаться“, — заявляет компания». CTVNews . Архивировано из оригинала 9 июля 2022 г. . Получено 9 июля 2022 г. .
^ "Отключение Rogers обошлось малому бизнесу в тысячи долларов: CFIB". 11 июля 2022 г. Архивировано из оригинала 11 июля 2022 г. Получено 13 июля 2022 г.
^ ab "Город Торонто ищет способы сократить зависимость от Rogers после отключения". Toronto Star . 11 июля 2022 г. Архивировано из оригинала 14 июля 2022 г. Получено 13 июля 2022 г.
^ Росас, Аура; Христова, Бобби. «Бизнес, врачи, служба DARTS в Гамильтоне и Ниагаре среди тех, кто пострадал от массового отключения Rogers». CBC News . Архивировано из оригинала 9 июля 2022 г. . Получено 10 июля 2022 г.
^ Мортон, Мишель; Касалетто, Лукас (8 июля 2022 г.). «Weeknd откладывает концерт в Торонто, поскольку канадцы сталкиваются с отключением Роджерса». CityNews . Архивировано из оригинала 9 июля 2022 г. Получено 8 июля 2022 г.
^ Live Nation Ontario, (@LiveNationON) (18 июля 2022 г.). ".Шоу @theweeknd в Rogers Centre перенесено на четверг, 22 сентября. Пожалуйста, сохраните билеты, так как они будут действительны на новую дату". Twitter . Архивировано из оригинала 18 июля 2022 г. . Получено 18 июля 2022 г. .
^ ab Karadeglija, Anja (8 июля 2022 г.). «Критики призывают парламент и CRTC немедленно расследовать отключение Rogers». National Post . Получено 9 июля 2022 г.
^ Рот, Эмма (9 июля 2022 г.). «Rogers восстанавливает обслуживание для «подавляющего большинства» клиентов после масштабного сбоя». The Verge . Архивировано из оригинала 9 июля 2022 г. . Получено 9 июля 2022 г. .
^ Фан Най, Айзек (11 июля 2022 г.). «Это 4-й день сбоя Rogers. Вот 4 вещи, которые вам нужно знать». thestar.com . Архивировано из оригинала 11 июля 2022 г. . Получено 12 июля 2022 г. .
^ "Rogers down? Обзор состояния и проблем в реальном времени". downdetector.ca . 12 июля 2022 г. Архивировано из оригинала 12 июля 2022 г. Получено 12 июля 2022 г.
^ "Сеть Rogers возобновляет работу после серьезного сбоя, затронувшего миллионы канадцев". Reuters . 8 июля 2022 г. Архивировано из оригинала 9 июля 2022 г.
^ Каллан, Айзек (9 июля 2022 г.). «Генеральный директор Rogers извинился, заявив, что причиной серьезного сбоя стала «модернизация технического обслуживания». Global News . Архивировано из оригинала 10 июля 2022 г. . Получено 10 июля 2022 г. .
^ "Меморандум о взаимопонимании по надежности телекоммуникаций". Инновации, наука и экономическое развитие Канады . Архивировано из оригинала 7 сентября 2022 г. Получено 1 декабря 2022 г.
^ ab Shecter, Barbara (24 июля 2022 г.). «Rogers shares Explain after „unprecedented“ Outage» (Роджерс делится объяснением после „беспрецедентного“ сбоя). Financial Post . Архивировано из оригинала 25 июля 2022 г. Получено 24 июля 2022 г.
^ Дешам, Тара (8 июля 2022 г.). «Далеко идущие последствия отключения Rogers показывают необходимость конкуренции: эксперт». CityNews Ottawa . Архивировано из оригинала 9 июля 2022 г. Получено 9 июля 2022 г.
^ abc Логан, Ник (8 июля 2022 г.). «Отключение Rogers показывает необходимость плана Б на случай отказа беспроводных интернет-услуг, говорят аналитики». CBC News . Архивировано из оригинала 9 июля 2022 г. Получено 9 июля 2022 г.
^ Паперни, Анна Мелер; Раджагопал, Дивья (12 июля 2022 г.). «Канадская компания Rogers предоставит клиентам 5 дней обслуживания после масштабного отключения». Reuters . Архивировано из оригинала 13 июля 2022 г. Получено 13 июля 2022 г.
^ Staffieri, Tony (10 июля 2022 г.). «Послание президента и генерального директора Rogers». Rogers . Архивировано из оригинала 12 июля 2022 г. . Получено 12 июля 2022 г. .
↑ Хелена Хэнсон (21 апреля 2021 г.). «Вот все, что вам нужно знать о получении кредита Роджерса после сбоя». Narcity Media . Архивировано из оригинала 8 июля 2022 г. . Получено 10 июля 2022 г. .
^ Лиза Бельмонте (9 июля 2022 г.). «Последнее отключение Rogers в Канаде привело к кредитам для клиентов, и вот как это работало». Narcity Media . Архивировано из оригинала 12 июля 2022 г. Получено 10 июля 2022 г.
^ ab Zukra, Joey (11 июля 2022 г.). «Заявление о разрешении подачи группового иска и назначении статуса представителя истца» (PDF) . LPC Avocat Inc . Архивировано (PDF) из оригинала 11 июля 2022 г. . Получено 24 июля 2022 г. .
^ Александра Посадски , «Источники сообщают, что отключение Rogers побудило провести встречу с руководителями телекоммуникационных компаний и министром промышленности для обсуждения рамок «взаимной помощи»» Архивировано 11 июля 2022 г. на Wayback Machine . The Globe and Mail , 11 июля 2022 г.
^ «Rogers предоставит клиентам пять дней обслуживания, поскольку он сталкивается с проверкой со стороны CRTC после крупного сбоя». The Globe and Mail . 12 июля 2022 г. Архивировано из оригинала 13 июля 2022 г. Получено 13 июля 2022 г. – через www.theglobeandmail.com.
^ «Клиенты Rogers в Торонто могут получить скидку в размере 400 долларов благодаря коллективному иску из-за отключения». www.blogto.com . Архивировано из оригинала 13 июля 2022 г. . Получено 13 июля 2022 г. .
^ Уиллис, Эндрю (21 июля 2022 г.). «Роджерс заменяет главного технического директора в связи с последствиями общенационального сбоя». The Globe and Mail . Архивировано из оригинала 21 июля 2022 г. Получено 21 июля 2022 г. – через www.theglobeandmail.com.