Бирюльки №434. Сбой на сети Мегафон - причины и последствия для отрасли

Привет.

Темы этого выпуска должны были быть совсем другими, во всяком случае на неделе мое внимание привлекли события, которые казались значимыми или по-крайней мере заметными, но сбой на сети Мегафон перекрыл с лихвой все, что происходило до того. Поэтому большая часть Бирюлек будет посвящена только этой истории и ее разным аспектам. А начнем мы с описания того, что случилось.

Содержание

1. Сбой в сети Мегафон, обсуждения и реакции абонентов
2. Западный опыт операторских проблем - T-Mobile в Нью-Йорке
3. Культура общения или про важность наушников в общественных местах
4. Незнайка на Луне и японский опыт
5. Смерть электроники по причине смены версии ОС
6. Возвращение Nokia 3310 и искусственный ажиотаж в России

Сбой в сети Мегафон, обсуждения и реакции абонентов

Пятница это всегда сложный день, люди пытаются доделать свои дела, чтобы со спокойной совестью уйти на выходные. У меня был ранний поезд в Петербург, по дороге наблюдались проблемы со связью, она то появлялась, то исчезала, что списал на дорогу. Но было ощущение, что в этот раз что-то не так, чем-то это напоминало первую половину недели в Туле, когда телефон сам-собой выпадал из сети, не мог зарегистрироваться и вел собственное, отличное от моего существование. Теперь я понимаю, что это была тренировка перед большим сбоем на сети Мегафон. К слову сказать на обратной дороге в Москву в воскресенье, все работало как часы, связь была на большей части пути.

Поволжье, города центрального региона и Москва, вот география сбоя на сети Мегафон, во время которого с утра до позднего вечера люди не могли позвонить, принять звонки или отправить SMS-сообщения, у кого-то работал мобильный интернет, но таких было немного. Также наблюдались отдельные счастливчики у кого по каким-то причинам связь была и они могли совершать звонки. В социальных сетях сбой сети Мегафон моментально привлек внимание, люди описывали где они находятся, что происходит на их устройствах. В первые часы не было понимания насколько масштабная проблема, так всегда происходит в подобных случаях. В СМИ информация появилась через час, а дальше объем публикаций нарастал как снежный ком - сайты, радио, телевидение. В Мегафон к этому моменту сообщили только о том, что произошел технический сбой, но не уточняли, что именно случилось.

Любой мало-мальски имеющий отношение к связи, мог сказать, что по признакам произошел отказ HLR, это не позволяло телефонам регистрироваться на сети, абоненты остались без связи. Но проблема в том, что в Мегафон система многократно дублирована, я был в двух центрах управления сети и инженеры компании с гордостью показывали оборудование и рассказывали, что при сбое одного из центров они переключаться на работу из другого в течение пары минут.

То, что этого не произошло наводило на неприятные мысли относительно природы проблемы. При таких масштабных событиях домыслы появляются моментально, а дальше разносятся со скоростью степного пожара. Одна из версий, которая активно обсуждалась в узких кругах, это атака на инфраструктуру как Мегафон, так и Ростелекома в европейской части страны. Сценарий логичный и объясняющий почему отказало сразу два дата-центра отстоящих друг от друга на сотни километров. Тут же всплыли политические комментаторы, которые умеют рассказать свои истории под любое актуальное событие. Проблема в том, что такого рода атаки могут осуществлять всего 5-6 стран, одна из которых Россия. Эти атаки экстерриториальные, они не идут из какого-то определенного места, как результат, возложить ответственность на какую-то страну сложно. Например, в концепции безопасности США подобный род атак назван прямым объявлением войны США, аналогично это воспринимается и в России. Странное дело, пострадавшая сторона должна будет понять, кто именно атаковал и почему, по возможности ответить. К счастью, в этот раз никаких атак не было, произошел внутренний сбой.

Пытливые умы не знающие как устроена инфраструктура оператора начали серьезно обсуждать, что на работу сети повлиял вирус WannaCry, который ровно за неделю до того начал заражать компьютеры по всему миру, в том числе пострадала абонентская служба Мегафон и розничная сеть оператора.

К счастью, инфраструктура любого оператора не работает на Windows любой из версий, это настольные ОС, в серверах стоят иные решения. Соответственно и пострадать от WannaCry оператор не мог в принципе.

Кто-то пытался распустить слухи о том, что это неудачная попытка протестировать оборудование для пакета поправок Яровой. Учитывая, что такого оборудования нет в природе, то затруднительного его тестировать. Равно как и то, что в отношение операторов уже принято решение отложить какое-либо внедрение пакета Яровой до появления сетей 5G, то есть до 2024 года как минимум.

К вечеру появилось видеообращение Петра Лидова, PR-директора Мегафон, в котором он впервые упомянул причину сбоя, проблема с оборудованием от HP и указал, что инженеры компании совместно с инженерами HP пытаются решить этот вопрос, как можно более оперативно. Конечно же были принесены извинения, равно как генеральный директор Мегафон это сделал чуть позже, пообещав всем пострадавшим компенсации, их размер и порядок получения будет озвучен в начале недели.

У многих людей вызвало вопросы, почему проблема на оборудовании HP вызвала такой массовый сбой и какое отношение оно имеет к связи. Давайте вместе разберемся, как устроены закупки инфраструктурного оборудования, чтобы понять почему вина HP выше, чем это кажется со стороны.

Несколько лет назад операторы почти полностью отказались от закупки оборудования по старинке, они перешли на сервисные контракты. В рамках таких контрактов приобретаемое железо привязывается также к контрактам на обслуживание, в которых описывается, что именно оператор получает. Например, Huawei поставляя базовые станции гарантирует их установку, обслуживание, а также те или иные показатели, которые вытекают как из конструкции базовых станций, так и качества их обслуживания. Для оператора это дает существенную экономию, нет надобности платить сразу за купленное оборудование, он получает рассрочку. С другой стороны, все проблемы решаются поставщиком и он также гарантирует работоспособность оборудования и несет за это ответственность прописанную в контракте.

У меня нет условий контракта с HP, но уверен, что он более-менее стандартный, плюс то, как описывали проблему в Мегафон позволяет точно утверждать, что HP обслуживает сервера поставленные оператору. Из описания ситуации Мегафон складывается впечатление, что обновление серверного ПО привело к замедлению работы серверов. Вот, что сказал Петр Лидов: “Сбой привел к тому, что возникает постоянная пиковая нагрузка на систему, в результате чего она не выдерживает. В настоящее время владелец этого программного обеспечения и оборудования компания Hewlett Packard занимается поиском системного решения”.

Выскажу предположение, что проблемы, которые я наблюдал в Туле в начале недели были первым звоночком, скорее всего обновление софта начинало загружать систему постепенно. Это снимает вопрос о том, почему неожиданно в HP обновили софт сразу в двух дата-центрах и куда смотрел Мегафон. Получается, что обновление было разнесено по времени, но “ошибки” накапливались постепенно, пока нагрузка на базы данных не выросла катастрофически, что привело к их сбою. Сама проблема выглядит как аналог DDoS, некие запросы загружали сервера и в итоге они не справлялись с нагрузкой.

Видимо для HP эта проблема стала неприятным откровением, так как возврат к старой прошивке и восстановление базы данных не привело к желаемому результату, из-за этого сбой был таким масштабным. Инженеры Мегафон начали работать по этой проблеме еще до того, как люди лишались связи, но ни резервных мощностей, ни решений для решения этого вопроса у них не оказалось. И это вовсе не экономия оператора на таких решениях, Мегафон технически является самым продвинутым оператором в России и лучше других защищен от сбоев, ирония судьбы, не так ли? Но цепь случайностей сложилась в катастрофу, от которой не оказалось защиты.

Подобного масштабного сбоя в России еще не было. Тем более не было ситуации, когда у оператора не работала большая часть Москвы (аналогичные проблемы были у Билайн, они системные у оператора из-за скудного финансирования развития сети, у Мегафон предпосылки совсем иные). Эта история гарантировано войдет в учебники, а Сергей Солдатенков уже пообещал сделать выводы и не допустить повторения подобного.

С точки зрения PR кажется, что ситуация приведет к негативным последствиям для оператора, но мы сможем это увидеть по результатам MNP в течение последующих месяцев. Опыт Билайн говорит о том, что массовые отказы в работе в Москве, не привели к заметному перетоку абонентов в другие сети. Отсюда можно сделать вывод, что в моменте Мегафон не потеряет многое, особенно если повторения таких ситуаций не будет.

В течение первых часов многие пользователи использовали свои вторые телефоны (как вариант SIM-карты во втором слоте телефона) для звонков, выросла нагрузка на отдельные базовые станции других операторов, например, Билайн или МТС в Москве. В каких-то конкретных зданиях, локально и в течение непродолжительного времени измеряемого минутами, могла отсутствовать связь. Что тут же посчитали отказом и этих операторов, но ничего подобного не было. Многие упоминали, что перестала работать Yota, искренне считая этого оператора независимым от Мегафон, напомню, что это дочка компании, которая работает ровно на том же оборудовании - упал один, значит упал и другой.

Для людей проблемой стало то, что они не могли не только звонить, но, например, заказать такси. Некоторые службы такси не работали с 11 до 15 часов в Москве, да и в других городах, они не могли принимать звонки, обслуживать клиентов. Их потери трудно подсчитать, но уверенно можно сказать, что они заметны. В онлайн-продажах также наступил провал, почти на пять часов продажи резко упали, банки не могли присылать SMS с подтверждением транзакций абонентам Мегафон, либо они сами пользовались услугами Мегафон для таких рассылок. У кого-то бухгалтерия не могла получить подтверждение из банка и задержала выплату зарплаты.

Хрупкость современного мира хорошо видна на примере этого массового отказа, но люди сохраняли спокойствие и нашли миллион способов оставаться на связи. Последующие реакции также были довольно спокойными, я ожидал более нервных и эмоциональных обсуждений, их почти не было. Основной лейтмотив звучал так, - проблемы случаются у всех, главное чтобы они не повторялись и быстро решались.

В Yota первыми разослали пресс-релиз в котором заявили, что выплатят до 20 млн рублей пострадавшим, им нужно обратиться в абонентскую службу компании. Жаль, что сам текст пресс-релиза не содержит никаких подробностей, уже потом представители компании объяснили, что компенсируют не просто день простоя, а дадут скидку на следующий расчетный период. Причем эта скидка будет до 20% от месячного пакета на смартфоне и до семи бесплатных дней для модема. Как по мне, так извинения достаточно ощутимые в денежном выражении. Возможно, что напишу Диванную аналитику, в которой разберемся в механизмах таких компенсаций, покрутим цифры и сценарии, которые проигрывали в компании, чтобы минимизировать свои потери. Напомню, что Мегафон объявит о своих компенсациях в начале недели, наверняка это будет что-то подобное предложенному Yota.

Сбой в сети Мегафон ставит перед нами целый ряд вопросов, ответы на которые будут искать не только в компании, но и вне нее. Например, нам нужно понять, как защитить операторов от подобных ситуаций, когда они могут быть инициированы извне. В данной истории даже аварийный роуминг в сетях других операторов не работал, люди не могли зарегистрироваться в них и совершать звонки. В случае войны именно сотовые сети станут одним из объектов атаки и поэтому их защита выходит на первый план. Что будет дальше? А дальше мы наверняка увидим последствия этих обсуждений, в которых безопасность сетей будет вынесена во главу угла.

Расскажите о том, как вы отнеслись к этой ситуации, насколько она стала для вас критичной или нет. Что вы предпринимали и как смотрите на эту проблему.

Внеклассное чтение

Западный опыт операторских проблем - T-Mobile в Нью-Йорке

Словно чувствовал, что пригодится это письмо чуть позже и хранил его про запас. Наш читатель делится своим опытом о связи от T-Mobile в Нью-Йорке, в комментариях письмо не нуждается:

Здравствуйте, Эльдар.

Работаю в небольшой оптовой компании в России, поэтому слежу за новостями рынка, и очень вам благодарен за "Бирюльки" и многое другое. Но сейчас не об этом. Устроил себе длительный отпуск в США. Согласен с большинством ваших утверждений про местных операторов, хотя за последний год очевиден прогресс. Но про отношение местного бизнеса к потребителям хочу подкинуть вам пример в копилку.

Одна из сим-карт, которой пользуюсь, - T-Mobile. В понедельник неожиданно перестал ловиться 3G и 4G. Большую часть дня провожу в небоскребе в Верхнем Истсайде, а там почти ничего не ловит, поэтому сначала значения этому не придал. Но на второй день после танцев с бубнами (два разных телефона, разные районы города, настройки и т.д.) обнаружил, что проблема глобальная. На следующее утро зашел в салон оператора, где передо мной очень вежливо извинилась и сказали, что проблема во всем Манхэттене, Бруклине и Джерси-Сити, и устранена она будет минимум через 24 - максимум через 72 часа. А теперь представьте, какой вой поднялся бы у нас, если бы у Билайна в большей части Москвы отрубился весь быстрый интернет на 3 дня!

P.S. Кстати, вчера вечером в Бруклине сигнал восстановился, а сегодня неожиданно стал ловить LTE и в офисе, и почти на всех станциях 2 и 5 поезда метро. Подробности пишу для конкретики)))

С уважением,
Иванов Артём

Культура общения или про важность наушников в общественных местах

О том, что культура общения по телефону в последние годы изменилась, мы не так давно говорили с вами.

Но теперь хочу рассказать о том, как я попал в просак, когда у меня разрядились мои наушники. Итак, скоростной Сапсан, за столом четыре кресла, друг напротив друга сидит мать и сын, ваш покорный слуга притулился у окна. Мать жаждет общения и постоянно что-то говорит или спрашивает, сын сидит в телефоне и на нем наушники, изредка, когда мать его громко хлопает по ноге отвечает, - “Отстань”. Им это общение привычно, но всех окружающих раздражает, так как создает суету и все как-то само собой получается громко. В моих наушниках совсем нет заряда, поэтому приходится все это слушать и это жутко мешает сосредоточиться. Не забывайте заряжать ваши наушники в дорогу или брать проводные, это вас спасет от таких попутчиков. По дороге в Питер именно наушники меня спасли от парня из первой фабрики звезд, один из участников группы “Корни”, по фамилии Кабанов - мат, прибаутки, какие-то странные женщины с глупым смехом и шутками на уровне пояса, все это раздавалось на весь вагон. А включил музыку и отсек эти раздражающие шумы, они тебя больше не касаются никак. Иначе бороться с подобными ситуациями сложно. А вы также решаете эти вопросы? Или как-то иначе?

Незнайка на Луне и японский опыт

Жизнь удивительна тем, что многое из описанного в фантастических книгах, находит свое отражение в предметах вокруг нас. Например, в “Незнайке на Луне” за сантики можно было покупать время работы обогревателя. А вот так за монетки продают телевизионные программы в Японии (аппарат старый, новые позволяют оплачивать со счет номера в отеле и на экране). Забавный пример технологий заточенных под конкретную задачу продажи контента.

К содержанию >>>

Смерть электроники по причине смены версии ОС

На днях столкнулся с удивительной, ранее невообразимой ситуацией. Когда-то давным давно купил домой сканер Canoscan LiDE 25, стоил он недорого, нужен был, чтобы сканировать какие-то бумажки. За давностью лет не помню, когда именно его приобрел, то ли в 2006 году, а может чуть раньше. Все это время он был подключен к старому ноутбуку, со своей задачей справлялся безо всяких нареканий, одним словом жил и жил.

Возился со старыми телефонами из коллекции и увез ноутбук, так как на нем стоит древняя версия Windows, а также куча софта для синхронизации телефонов. Это была ошибка, так как когда мне понадобилось отсканировать страничку текста, выяснилось, что сделать этого я не могу. Ни одна современная операционная система старый сканер от Canon не поддерживает, нет ни оригинальных драйверов, ни решений от умельцев. Это настолько странно, что меня ситуация как-то покоробила. Сканер этот может проработать очень долго, лет пять-шесть он бы еще протянул с теми нагрузками, что у него есть в моих руках. Но получается, что производитель толкает меня на покупку нового сканера, что мне не нравится. Более того, сегодня большая часть людей вместо покупки сканера использует обычный смартфон с соответствующей программой, сфотографировал страничку текста, программа выпрямила ее как нужно, сохранила в тот формат, что вам необходим и дальше можете отправлять этот текст куда угодно. Несоизмеримо удобнее, чем привычные сканеры, где все происходит медленно, а затем нужно еще и сохранять результат в какой-то файл или искать его на жестком диске. Как вы понимаете сканер я покупать не собираюсь, мне он больше не нужен.

В свете этой ситуации вспомнил, что многие старые принтеры уже лишены поддержки и найти на них драйвера не так уж просто, зато существуют сторонние решения, как их подключать к современным компьютерам. Так для какого-то принтера от HP у меня есть еще даже картриджи купленные лет десять назад, не успел их израсходовать и постепенно они тратятся детьми. Тогда в офисе печатали много всякой всячины и уходило до десятка картриджей в месяц, а то и больше, а потом перешли на безбумажные технологии, запас же остался. Обидно было бы, если принтер не позволял печатать из-за версии ОС, это как-то неправильно. Я понимаю, что производитель не хочет поддерживать свои устройства до бесконечности, ему это не выгодно. Но как пользователь я хочу ровно обратного.

Не так давно мы обсуждали, что аккумуляторы в электронике это расходный материал. Примерно такое же отношение у меня к гарнитурам, хотя многие люди считают, что беспроводная гарнитура это дорогой аксессуар и должна работать многие годы. К сожалению, это совсем не так. Основная проблема беспроводных гарнитур в том, что в них небольшой аккумулятор, он за год-полтора почти совсем выходит из строя, особенно если вы активно пользуетесь гарнитурой, в том числе и зимой. Например, моей гарнитуре Level Un PRO Anc почти полтора года. Эта гарнитура прожила зиму, минусовые температуры и только в последние недели стала терять заряд (раньше спокойно хватало на 2-3 дня прослушивания музыки, то есть часов на 10-15 работы), теперь разряжается за день, а иногда просто сама-собой выключается.

Понятно, что время этой гарнитуры пришло, никто не будет ее ремонтировать, такие аксессуары не предназначены для ремонта. На момент покупки она стоила около 150 долларов, то есть гарнитура не бюджетная. Но ломаются они все примерно одинаково и в сравнимые сроки. За много лет использования беспроводных гарнитур понял, что ни одна не выживает больше, чем два года при моем использовании (разговоры, музыка). Есть более бережливые пользователи. у них выходит 2-3 года, но потом все то же самое. Поэтому давайте считать, что гарнитуры это тоже своего рода расходный материал.

Но считать принтеры и сканеры, МФУ такими “расходными” материалами и всего лишь из-за отсутствия драйверов, я наотрез отказываюсь. Надо чтобы в Microsoft или Apple придумали, как использовать старые устройства в новых версиях ОС и сделали этот процесс легким для пользователя. Хотя может быть я ошибаюсь? Как вы считаете, нужно ли поддерживать зоопарк старых устройств или пользователя должны всегда толкать на покупку новых моделей? Как вы думаете?

К содержанию >>>

Возвращение Nokia 3310 и искусственный ажиотаж в России

В России начались продажи Nokia 3310, обновленной модели, которая имеет сходный номер с когда-то легендарным кнопочным телефоном. За первые часы магазины в которых были эти аппараты полностью продали их, остались с пустыми полками, что заставило сразу же говорить про ажиотажный спрос и ностальгию людей по кнопочным телефонам.

Обзор этого телефона появится на неделе, пока же давайте обсудим информацию об ажиотаже и немыслимых продажах. Сама компания HMD Global никак не комментировала уровень продаж, а вот розница говорила о высоком спросе. Об этом рассказали в Связном и в МВидео.

Чтобы понимать, что такое высокий или низкий спрос нам недостаточно самого факта дефицита, ведь можно поставить на полку несколько телефонов, моментально их продать и заявить, что спрос гигантский. В 2016 году на российском рынке было продано порядка 12 млн штук кнопочных телефонов, для сравнения смартфонов было продано почти 26 млн штук. Средняя цена продаваемого кнопочного телефона составляла 820 рублей. Вниз показатель средней цены тянут операторские продажи, у них кнопка стоит 500-600 рублей и продается в больших количествах. Совсем несложно посчитать, что в месяц в России условно продается миллион кнопочных телефонов. Запомните эту цифру, так как она важна для оценки того, насколько успешна Nokia 3310.

В Ведомостях появилась статья в которой утверждается по словам источников близким к HMD Global, что первая партия в России составила 10.000 штук. Много это или мало? На мой взгляд, это немного, так как на фоне миллиона штук эта цифра меркнет. Допустим, что за месяц в России смогут продать 30-50 тысяч аппаратов, это будет до 5% рынка кнопки. Для новой модели по максимальной для этого сегмента рынка цене 3990 рублей, это очень неплохой показатель, рынок есть и устройство продается. Но говорить об ажиотаже или бешеном спросе не приходится, модель просто заняла свою нишу. Тем более, что в 2016 году доля Microsoft/Nokia на рынке кнопки в России составляла 15%, то есть они продали за год 1.8 млн штук. В месяц это порядка 150.000 штук и тут можно говорить, что как минимум треть этих продаж обновленная Nokia может на себя перетащить. В этом аспекте 10.000 штук не выглядит каким-то рекордом, это скорее первая ласточки и первая позитивная новость для компании. Посмотрим, как рынок примет смартфоны Nokia. А прелесть Nokia 3310 в том, что эта модель будет продаваться долго и примерно в одинаковых объемах, на плато продаж она выйдет уже в начале лета, когда первый спрос утихнет. Напомню, что предыдущая Nokia 3310 продавалась с 2000 по 2005 гол и всего было продано 126 млн штук. До этого результата новой модели конечно же не добраться, но этого никто и не ждет.

Внеклассное чтение

P.S. Хорошей вам и надежной связи, приятного настроения и умных людей вокруг. Скоро лето!

К содержанию >>>

Ссылки по теме

Поделиться: 

Мы в социальных сетях:

• ВКонтакте
• Telegram

Больше материалов
на новой версии сайта. Теперь читать с мобильных
стало удобно!

Есть, что добавить?! Пишите... [email protected]