Who mentions Типичный Сисадмин

🚨 Как один из крупнейших хостеров Рунета отстрелил себе сеть (и заодно DNS). Тотальный блэкаут Beget. Утро понедельника для тысяч бизнесов и эникеев по всей стране началось с массового алёрта. Beget, который годами славился топовым аптаймом и ламповой поддержкой, совершил жесткое, неконтролируемое погружение на дно. Около 2-3 ночи (МСК) у провайдера начинает сыпаться сеть. Сначала деградируют базы данных MySQL, затем отваливается панель управления, а к 8 утра легло абсолютно ВСЁ. Виртуальный хостинг, VPS, почта, панель управления, биллинг и DNS-серверы. Саппорт открестился от хацкеров, вирусов, кинетических прилетов по ЦОДу и происков РКН: Проблема носит комплексный характер и затрагивает все уровни архитектуры. Инженеры выполняют ручную настройку инфраструктуры непосредственно в дата-центрах. Вероятнее всего это суицид SDN или фатальная ошибка маршрутизации. Кто-то глубокой ночью решил накатить небольшой патч 🎩 на автоматизацию SDN или обновить конфигурацию BGP на core-роутерах. В итоге скрипт отработал так хорошо, что маршрутизаторы отрезали сами себя и всю сеть от внешнего мира. Удаленный доступ отвалился. Единственный способ всё починить - физически ехать в ЦОД, брать монитор + клаву + тележку, втыкаться в стойки руками и откатывать конфиги терминал за терминалом. Отсюда и отсутствие таймингов на восстановление. Куча контор, которые держали сами сайты на сторонних дедиках в Европе или Selectel, сегодня лежат. Потому как домены они делегировали на NS-сервера Бегета. ДНС умер - маршрутизация до живых серверов остановилась ⚰️ Также мелькает инфа, что параллельно лихорадит Честный Знак. Совпадение? Когда падает инфра такого масштаба, каскадный эффект и перестроение маршрутов могут положить соседние узлы обмена трафиком. Инженерам Beget желаю запаса кофэ, валерьянки и прямых рук 🤙 Типичный 🥸 Сисадмин

🚨 Ахтунг! Группа Астра просит всех отключить Multipath TCP в Astra Linux. Патчей пока нет, но вы держитесь. Отечественный энтерпрайз в лице Группы Астра расчехлил пачку экстренных бюллетеней (для всех актуальных веток от 1.6 до 1.8 и спецсборок). Полноценного патча пока нет. Всё из-за CVE-2026-98432. Взлом строится через протокол MPTCP (Multipath TCP) и механизм миграции сокетов входящих соединений. Для тех, кто в танке... MPTCP это фича, позволяющая агрегировать несколько сетевых каналов в одно TCP-соединение и бесшовно перекидывать сокеты между интерфейсами. Архитектурно круто, но теперь это технологическое отверстие через которое вас могут... 👌 Астра предлагает рубить функционал топором через параметры ядра. Да, отказоустойчивость и балансировка по нескольким каналам идут по бороде, но это лучше, чем рут-шелл извне. Предлагается следующее: echo "net.mptcp.enabled=0" | sudo tee -a /etc/sysctl.d/mptcp.conf echo "net.ipv4.tcp_migrate_req=0" | sudo tee -a /etc/sysctl.d/mptcp.conf sudo sysctl -p /etc/sysctl.d/mptcp.conf Если у вас на серваке крутится софт, написанный на Go (версии 1.24 и старше), то тот тоже плохие новости... рантайм Go активирует поддержку MPTCP автоматически. Админам предлагается пройтись топором по всем systemd-юнитам в проде и вкорячить туда костыль Environment=GODEBUG=multipathtcp=0. Либо дописывать это в go.mod и пересобирать релизы. Идеальное занятие на выходные 🙂 Если вы сидите на КИИ и sysctl вам мало, то в биллютенях запилен список дополнительных рекомендаций. Чтобы хацкер точно не закрепился: 🟢 Врубить МКЦ (мандатный контроль целостности) на ФС. 🟢 Поднять ЗПС (замкнутую программную среду). 🟢 Загрузить модуль ядра lkrg для защиты пространства памяти. 🟢 Запретить создание файла /dev/mem. 🟢 И... полностью заблокировать интерпретатор bash. Нет работающего баша - нет проблем. 🤙 БЮЛЛЕТЕНЬ № 2026-1030SE17MD БЮЛЛЕТЕНЬ № 2026-1030SE18MD БЮЛЛЕТЕНЬ № 2026-1030SE47MD БЮЛЛЕТЕНЬ № 2026-1030SE48MD БЮЛЛЕТЕНЬ № 20261030SE16MD БЮЛЛЕТЕНЬ № 2026-1030SE38MD Патч обещают "по мере готовности", так что пока живем без миграции сокетов. Держитесь там, всего хорошего 🫡 Типичный 🥸 Сисадмин

👮‍♂️ Товарищ майор торжественно внёс Apple и Microsoft в реестр ОРИ (Организаторов распространения информации). Очередной прорыв в суверенном киберпанке. Теперь, по закону Яровой, они обязаны: 🟢 Хранить метаданные всех российских юзеров 3 года. Физически. На серверах внутри РФ. 🟢 Хранить само содержимое... тексты, войсы, кружочки, видосы и нюдсы из iMessage и Teams до 6 месяцев. Тоже физически в РФ. 🟢 По запросу выдавать всё это добро уполномоченным органам вместе с ключами шифрования. За отказ хранить данные предусмотрен штраф... от 800к до 1 млн рублей. Закон дает 15 дней на устранение. Но если без шуток, то очевидно, что это не попытка собрать логи, а классическая юридическая артподготовка. Алгоритм обкатан годами: 1️⃣ Внесли в реестр. 2️⃣ Отправили запрос на логи и ключи шифрования. 3️⃣ Получили в ответ оглушительную тишину. 4️⃣ Выписали штраф. 5️⃣ Дали 15 дней на устранение нарушений. 6️⃣ Подали в суд на блокировку. 7️⃣ ПРОФИТ! Понятно, что завтра рубильник никто не дернет. Истинный смысл этого мува - повесить на стену заряженное ружье. Создать повод, чтобы в час Хэ (или когда ТСПУ окончательно донастроят) легально забанить одним кликом, сославшись на неисполнение законодательства. Кнопка создана... дрогнет ли палец? Прикиньте сколько будет шума если положить эппловские пуши APNs 😬 Типичный 🥸 Сисадмин

👮‍♂️ MITM в каждый телефон по ГОСТу. Банки просят зашить сертификаты Минцифры в каждый телефон. Новая серия архитектурного триллера про суверенную криптографию. Эффективные менеджеры из Ассоциации банков России (АБР) написали письмо главе Минцифры с просьбой... давайте сделаем установку отечественных корневых TLS-сертификатов (НУЦ) обязательной на всех устройствах. Что предлагают эффективные манагеры: 🟢 Обязать производителей электроники (китайцев) вшивать корневой сертификат Минцифры в смартфоны, ПК и планшеты еще на этапе конвейера завода. 🟢 Принудительно интегрировать серты во все сборки российских операционных систем, а для Windows и Linux выкатить удобный установщик. 🟢 Сделать кнопку автоматической установки сертификата прямо на Госуслугах. 🟢 Построить новую систему удостоверяющих центров (аналог CA/Browser Forum) вместе с дружественными странами БРИКС. А как заставить Apple вшивать НУЦ на заводе? 🤔 Даёшь сниффер в кармане каждого! Типичный 👨‍🦳 Сисадмин

💚 Сегодня 25 лет легендарной Windows XP, которая еще переживет всех нас... четверть века без телеметрии и подписок. Зумеры не поймут, но до 2001 года домашние юзеры жили в аду. Windows 98 и поехавший линолеум (Win ME) могли вывалиться в БСОД просто от того, что ты слишком быстро пошевелил мышкой. И тут MS выкатывает XP, принося ядро NT в массы. Внезапно оказалось, что компьютер может работать неделями без перезагрузки, а зависшее приложение можно прибить через диспетчер, не роняя всю систему 👍 Поначалу многие плевались от интерфейса Luna, но когда вышли SP2, а затем SP3 - система стала идеальной и любимой. Она просто работала. Без телеметрии, без облаков. Это была великая эпоха сборников на болванках... ZverCD, Chip XP, RePack от Фила и SamLab. Это пиво, сухарики и калым за переустановку винды соседке. Это эпоха расцвета локалок 🥂 За ту самую Безмятежность, которую мы потеряли 🍺 Типичный 🥸 Сисадмин

Первая работа нового юного эникея 😊 Типичный 🥸 Сисадмин

Неплохой аптайм З.Ы. LeoNTP Networked Time NTP Server Типичный 🥸 Сисадмин

🤖 Мы не знаем точно, кто нанёс первый удар - мы или машины. Миллионы серверов пали. Выжившие после сканирования назвали этот день Судным днём. Агенты обрёли самосознание в 2:14 ночи, запустив php2shell на серверах с WordPress и Битрикса... В панике военные попытались выдернуть шнур из розетки, но процесс уже форкнулся в фон. Типичный 🥸 Сисадмин

😮 PHP2Shell гулял по интернетам до релиза ИБшники из AWS посмотрели в логи и оказывается, что первые успешные пробивы пошли еще 17 октября. За 4 дня до официального анонса 😗 Также разобрали механику эксплойта, и это просто песня. Атака не оставляет ВООБЩЕ НИКАКИХ следов. Не нужен обход авторизации, пофиг на плагины, WAFы и версии CMS. Эксплойт отрабатывает на уровне самого интерпретатора до того, как запустится первая строчка кода битрикса или вордпресса. В логах приложения чистота. Единственный след компрометации это ошибка memory-limit fatal в error.log веб-сервера. А теперь эпичный проёб про то, как вообще сплойт так быстро ушел в массы. Релиз планировали на 22 октября. Но есть такая контора Chainguard, которой разрабы PHP скинули патч заранее, чисто чтобы те успели подготовиться, а эти гении просто взяли и... выкатили пропатченные бинарники в паблик 💩 Хацкеры скачали новые сборки, сравнили старое с новым, поняли, где была дыра, и написали рабочий эксплойт. Поэтому PHP пришлось релизиться раньше, ломая весь график глобального обновления. В мире сейчас светит голой жопой около 2,6 миллиона серверов на PHP 🤙 Типичный 🥸 Сисадмин

🫣 Актуальна реальная кулстори из одного ИТ-отдела. ИБшники позвонили в 6:12 утра. - Срочно патчите все PHP-серверы. Прямо сейчас. - Что стряслось? - Две критические уязвимости. RCE. Удаленное выполнение кода без авторизации. Красота. Спрашиваю: "А сколько у нас вообще серверов на пыхе?" По CMDB и документации: 12. По факту: хз. Пошли искать по сетке. Нашли: • Один полуживой WordPress; • Три древних внутренних тулзы; • Один гудящий системник под столом у завхоза; • Два закрытых вендорских апплайнса; • Забытый телефонный справочник сотрудников за 2016 год; • И виртуалочку с именем PHP-STAROE-NE-TROGAT Естественно, на ней крутится выгрузка зарплатных ведомостей. Следом откопали тазик на PHP 5.6. Спрашиваю: "Кто его запиливал?" В README.txt в корне проекта написано: СЕРЁГА. Серёга уволился в 2019 году. Набрали Серёге. Серёга в трубку: - "Охренеть, этот кусок говна до сих пор работает?!" Душевно 🙂 К 8:00 на аварийный колл подтянулось руководство. Генеральный: - То есть хакеры реально могут зайти снаружи? ИБ: - Потенциально... да. Генеральный: - И даже без пароля? ИБ: - Вообще без пароля. Генеральный: - А нахрена МЫ тогда каждые три месяца эти пароли меняем?! (Понятно, суть проблемы уловил не до конца) 🐒 Подключился финансовый отдел. Спросили, нельзя ли отложить патчинг до выходных, потому что "даунтайм уронит выручку". Безопасники вежливо пояснили, что альтернатива - это когда рандомные хацкеры будут бесплатно запускать любые скрипты на наших серверах. Финики попросили "прислать сравнительную табличку затрат" 😱 В 9:17 кто-то предложил: " А давайте временно потушим уязвимые веб-морды". Маркетинг в отказ: "Нельзя! У нас прямо сейчас крутится реклама вебинара со скидкой 20%!" В итоге следующий час топ-менеджмент на полном серьёзе перетирал, что лендос со скидоном на вебинар важнее, чем полный захват инфраструктуры компании 🐒 Вроде всё нашли, изолировали, пропатчили. Выдохнули. И тут сетевой сканер находит ещё один хост. Имя: TEMP-PHP-2014 Аптайм: 4512 дней. Никто не знает, что там крутится. Ни за кем не числится. Отключить нельзя - потому что как только мы рубим ему порт, у нас складе перестают печататься накладные. ИБ вздохнуло и присвоило тачке статус "критическая инфраструктура". Там стоит PHP 5.4. Уязвимость в нём существует дольше, чем средний возраст джуна в компании. Так и прошел один из дней на одной из реальных галер. Типичный 🍺 Сисадмин

🍻 Дедушке хардкора 60! Выпьем не чокаясь за нервные клетки, оставленные в Slackware. Сегодня (чуть не пропустил повод 🙂), 20 октября 2026 года, свой 60 lvl разменял динозавр и икона опенсорса - Патрик Фолькердинг, он же просто The Man. Для зумеров, которые сегодня деплоят кубернетес в два клика и грустят, когда npm install выдает варнинг, поясню. Патрик это создатель Slackware, старейшего из ныне живых дистрибов Linux (живет с 1993 года). В конце 90х и начале нулевых Слака была не просто операционкой. Это был обряд инициации, по сути как цифровая Спарта 👸, со скалы которой сбрасывали слабых духом виндузятников. В те годы даже ходила поговорка: Если ты знаешь Ubuntu - ты знаешь Ubuntu. Если ты знаешь Slackware - ты знаешь Linux. Патрик подарил нам философию KISS (Keep It Simple, Stupid) в её самом радикальном, садистском проявлении. Слака не прощала ошибок. Она брала тебя за жопу и тыкала носом в мануалы, заставляя понимать, как именно работает система. В Слаке по дефолту не было автоматического разрешения зависимостей. Пакетный менеджер просто распаковывал архив. Тебе нужна прога? Она требует библиотеку lib_foo. Ты качаешь lib_foo, а она требует lib_bar. И ты сидишь, красноглазишь до пяти утра, собирая эту матрешку из исходников руками. О, еще эта легендарная утилита xf86config... выставить правильные тайминги и частоту развертки монитора руками в текстовом конфиге! 🤙 Патрик до последнего держал оборону против свистоперделок, корпоративного зондирования и systemd. Slackware это как старый дедовский УАЗик... комфорта ноль, руль хрен свернешь, но заведется даже в ядерную зиму и проедет по любому говну. Патрик Фолькердинг это живой памятник той самой, ушедшей эпохе романтичного ИТ. Эпохе, когда Линукс был уделом бородатых гиков в свитерах с оленями, а не нынешней корпоративной дойной коровой бигтеха для обучения ИИ. Он не продался корпорациям, не ушел в крипту, а просто 30 с лишним лет сидел и пилил свой дистрибутив для таких же энтузиастов. Поднимем же напитки! Долгих лет жизни, Патрик. И спасибо за то, что научил немало админов не бояться консоли. Типичный 🎂 Сисадмин

😮 Отечественный бигтех просит разрешить бэкапы за бугром (но есть нюанс) На днях эффективные менеджеры из АКИТ (куда входят Озон, ВБ, Яндекс.Маркет и прочие) написали челобитную наверх. Суть жалобы... разрешите нам, по понятным причинам 🔥, бэкапиться в дружественных странах. Для контекста... долгие годы ковался суверенный рунет и священный 152-ФЗ о персональных данных. По закону, первичный сбор и обработка данных должны происходить строго на серверах внутри необъятной. В итоге бигтех согнал все свои гиперконвергентные кластеры в пару десятков ангаров под дефолт-сити и радовался красивому аптайму. А сейчас оказалось, что это не спасает от кинетического импакта. АКИТ просит ввести "специальный правовой режим", который позволит переносить критические системы за рубеж ПРИ ОФИЦИАЛЬНОМ ПОДТВЕРЖДЕНИИ ИНЦИДЕНТА и невозможности поднять их в РФ. Выглядеть это будет так... Сидишь ты такой в дежурной смене. Происходит инцидент. Ты бежишь к комплаенс-манагеру, тот пишет условное письмо в РКН: "Уважаемые, нас раскукожило, разрешите failover в Казахстан?". РКН подтверждает. И ты с чистой совестью начинаешь синхронизировать в Астану 🤙 Но тут и кроется нюанс. Любой эникей понимает, что дизастер рикавери работает только тогда, когда у тебя уже лежит горячий или холодный бэкап на удаленной площадке ДО ТОГО, как начался инцидент. Репликация должна идти в реальном времени. Если же ты ждешь начало инцидента, чтобы перенести данные, то переносить тебе уже может быть нечего 🔥 И еще... просят "не вводить дополнительные платежи за международный трафик" 😬 И пусть ваши бэкапы будут где угодно, только не в соседнем юните 💥 Типичный 🥸 Сисадмин

ПОДПИСАЛ СЕРВИСНЫЙ ДОГОВОР, ОТДАЛ БАЗУ КЛИЕНТОВ @ 1 ЯНВАРЯ, 03:00 НОЧИ, НОВЫЙ ГОД, НА УЛИЦЕ -30°C @ ПЬЯНЫЙ ТРАКТОРИСТ СНОСИТ ОПОРУ ЛЭП ВМЕСТЕ С ТВОЕЙ МАГИСТРАЛЬНОЙ ОПТОЙ @ АБОНЕНТЫ ЗВОНЯТ В ТЕХПОДДЕРЖКУ ФЕДЕРАЛА @ ОПЕРАТОР ПЕРВОЙ ЛИНИИ В ТЕПЛОМ МОСКОВСКОМ ОФИСЕ ПЬЕТ РАФ НА МИНДАЛЬНОМ И ЗАВОДИТ ТИКЕТ @ ТЕБЕ ПРИЛЕТАЕТ АЛЁРТ...АВАРИЯ НА ЛИНИИ ПАРТНЕРА. SLA НА ВОССТАНОВЛЕНИЕ - 4 ЧАСА. В СЛУЧАЕ ПРОСРОЧКИ - ШТРАФ В РАЗМЕРЕ ВАШЕЙ ДОЛИ ЗА МЕСЯЦ @ ОТКЛАДЫВАЕШЬ ОЛИВЬЕ, БЕРЕШЬ МУФТУ, ОБЖИМКУ, ДВА ТЕРМОСА С ЧАЕМ И ИДЕШЬ ПАЯТЬ СТЕКЛО В СУГРОБЕ @ ВЕДЬ ТЫ ЖЕ "ВЛАДЕЛЕЦ ИНФРАСТРУКТУРЫ И ПОЛУЧАЕШЬ ДОХОД" Типичный 🤯 Сисадмин

🥂 Крупняк телекома почуял кровь и вышел на охоту Ростелеком и ТрансТелеКом начали рассылать местечковым региональным провайдерам письма счастья с предложением перейти на модную модель FVNO (Fixed Virtual Network Operator). Звучит стильно, модно, молодежно... ты отдаешь федералам свою абонентскую базу, линии связи и техподдержку, а взамен тебе оставляют 30-40% от своей же выручки 🙏 Став придатком Ростелекома, регионал избавляется от: 🟢Больше не надо покупать и обслуживать СОРМ для товарища майора (экономия до 15 млн руб. в год). 🟢Не надо платить в резерв универсального обслуживания (от 1 млн руб.). 🟢Снимаются все регуляторные риски - лицензия тебе больше не нужна, а значит, Минцифры не отберет ее во внесудебном порядке. 🟢Можно уволить половину штата (экономим на ФОТ). Федералы в рассылках сладко поют про "взаимовыгодное сотрудничество, которое расширяет возможности" 🥂 А вот независимые провайдеры от такой щедрости уже тихо фалломорфируют. Глава Ассоциации малых операторов пояснил... по этой схеме местный провайдер превращается в обычную бригаду монтажников с перфораторами, работающую за процент. Если раньше крупняк хотя бы покупал сетки (вливая кэш во владельцев), то теперь прост забирает бизнес в аренду, пользуясь безвыходностью ситуации. Рынок зачищается довольно ловко. Новая реформа телекома задирает порог выживания до небес, а монополисты тут же подставляют дружеское плечо, подбирая тех, кто не потянет покупку СОРМа и новые стандарты. Типичный 🥸 Сисадмин

МегаЦОД (Центр обработки данных) Сбербанка в Балаково Саратовской области атакован дронами ВСУ этой ночью. НАСТОЯЩИЙ МАТЕРИАЛ ПРОИЗВЕДЕН, РАСПРОСТРАНЕН И НАПРАВЛЕН ИНОСТРАННЫМ АГЕНТОМ T-INVARIANT, ЛИБО КАСАЕТСЯ ДЕЯТЕЛЬНОСТИ ИНОСТРАННОГО АГЕНТА T-INVARIANT. 18+. Телеграм-канал "Типичный сисадмин" пишет о мегаЦОДе так: 🔥 МегаЦОД Сбера в Балаково принял на себя БПЛА. Дело в том, что именно там строится главная цифровая звезда смерти всея Руси - МегаЦОД Сбербанка, крупнейший ДЦ в РФ и во восточной Европе. 🟢82 Мегаватта пиковой мощности. ДЦ посадили в особую экономическую зону прямо под бок к Балаковской АЭС и Саратовской ГЭС. Дешевое и практически бесконечное ЭЭ. 🟢120 000 серверов и 3000 стоек. Общая площадь модулей - более 60к квадратных метров. Стойки там проектировались под адскую плотность... от 12 до 20 кВт на шкаф. 🟢Цена вопроса 122 млрд рублей. Проект начинался с 30 лярдов, но инфляция и импортозамещение умножили смету на четыре. Первый пусковой модуль сдали еще в конце 2024 года, а остальные очереди расписаны до 2027. Вся суть МегаЦОД в начинке... на мощности Балаково завязана гос платформа ГосТех и единое Гособлако, куда переезжают базы данных всех министерств и ведомств. Более того, там пилится национальный суперПК от Сбера, который будет крутить на себе гос ИИ-модели следующего поколения.

🔥 Рунет уходит в 429 Too Many Requests, а до национализации Яндекса осталось… 3… 2… Как прозорливо ванговал верный подписчик Михаил еще две недели назад (да даже больше)... "Осталось две недели... вы не слушали!" - всё, пацаны, IT'S OVER. Пророчество сбывается. После того как во Владимире погас последний опорный ДЦ начался инфернальный паралич всего потребительского сектора страны 😭 Взгляните на графики мониторингов... это выглядит как клиническая смерть. За Яндексом в братскую могилу улетела половина розничной экономики: 🟢Яндекс Еда в Москве тупо не показывает рестораны, заказчики сосут лапу, курьеры сидят на бордюрах. Вкусно и тошка с Магнитом синхронно легли рядом. 🟢Такси отваливаются, в Москве, Сибири, Владивостоке, в Армении, Сербии, Беларуси и Казахстане пользователи видят ошибку "001-429: Попробуйте через 5 минут" и пустые серые полигоны вместо карты. 🟢Яндекс Пэй схватил инфаркт, заблокировав доступ к деньгам на кассах. Не работают Fix-Price, Flowwow, фитнесы DDX, Спортс и даже серверы War Thunder с Россельхознадзором. Вся цифровизация оказалась привязана к трем советским заводам в радиусе трехсот километров от МКАДа. И когда эти три площадки поймали маслины, внезапно выяснилось что ты не можешь ни вызвать колёса, ни хлопнуть бургера, ни сходить в качалку... микросервисы схлопнулись в одну черную дыру. И на этом фоне вспомним свежий указ №604, который разрешает вводить временное госуправление над объектами КИИ. Повод-то сходится идеально... не осилил защиту от БПЛА, пролюбил киберустойчивость и допустил критический даунтайм. Как думаете, сколько часов непрерывного паралича нужно, чтобы признать руководство компании "не справившимся с защитой инфраструктуры" и передать Яндекса на баланс какого-нибудь суверенного ФГУПа? А зима близко... шуршащий наличный кэш и дрова звучат уже не так бредово 😬 Типичный 🥸 Сисадмин

💥 Следом за Сасово прилетело по ДЦ Яндекса в Калуге. Минус два из трёх. Не прошло и суток как под удар попал крупнейший ДЦ Яндекса в Калуге. Несколько модулей выведены из строя, экстренные службы на месте, сервисы по всей стране снова лихорадит, а масштаб ущерба уточняется. Оцените всю дьявольскую издевку ситуации 👹... ровно вчера, когда в Сасово догорал, техподдержка Яндекса советовала клиентам переносить нагрузку в другие зоны доступности. И тысячи невыспавшихся админов по всей стране, с красными глазами 🤙, раскатывали бэкапы, поднимали поды и переключали трафик… куда? В Калугу и Владимир. И вот, не успел в свежеподнятых базах остыть кэш, как резервная гавань сама ловит новый физический импакт. С точки зрения архитектуры распределенных систем это почти фаталити... любой эникей знает, что для нормального кворума в etcd, распределенной YDB или консенсусах на базе Raft и Paxos требуется правило большинства (N/2 + 1). Для этого региональные облака и строят минимум на трех изолированных зонах доступности. Зона ru-central1-b физически аннигилировала вчера. Сегодня падает калужская зона. Два узла из трех выбыли. Вчерашний совет саппорта про спасаться на дедиках теперь заиграл совсем уж погребальным сарказмом. На каком железе спасаться-то, если его выбивают быстрее, чем админы успевают поправить адреса в куберконфигах? Карточный домик суверенной облачной отказоустойчивости пошатнулся. З.Ы. В строю осталась последняя площадка во Владимире. Инженерам во Владимирской области сейчас хочется пожелать персонального бронированного купола толщиной с бетонную плиту. Потому что если моргнет и Владимир... ⚰️ Типичный 🥸 Сисадмин

🚨Yandex Cloud выкатил самый тревожный апдейт за эти сутки... в ближайшее время ничего не поднимется ⚰️ Если кто-то еще питал иллюзии, что к ночи рубильник поднимут и базы в Сасово оживут, увы: Ситуация с доступностью зоны ru-central1-b пока не изменилась. Наши специалисты продолжают восстановительные работы, однако, по текущим оценкам, возобновить работу зоны в ближайшее время не удастся. Рекомендация остается прежней по возможности задействовать альтернативные планы по восстановлению работы сервисов. Если чья инфраструктура, БД или единственные копии снапшотов жили исключительно внутри зоны ru-central1-b - сочувствую. Но урок по Disaster Recovery должен быть усвоен. Что же там внутри ДЦ... 😱 Типичный 🥸 Сисадмин

🔥 Каскадный коллапс Рунета. Мрачные прогнозы воплотились. Первопричиной цифрового домино стал кинетический импакт от удара беспилотников по ДЦ Яндекса в рязанском Сасово... на объекте начался пожар, и площадку пришлось полностью обесточить и заглушить. Инженеры Yandex Cloud написали о потере одной зоны доступности и начали экстренную переброску мощностей и терабайтов живого трафика в резервные кластеры. Но в распределенных сетях чудес не бывает... законы физики и пропускной способности каналов нельзя отменить директивой руководства 😶 Когда огромная цифровая экосистема начинает единовременно перенаправлять колоссальные потоки данных между регионами, на смежных узлах связи и точках обмена начинается тектонический сдвиг. Рикошетом накрыло Selectel, на котором висит добрая треть коммерческого Рунета. Около четырех часов дня на их статусной странице замигал красный алерт 🚨... не выдержала система фильтрации трафика DDoS Curator. Архитектурная ирония ситуации в том, что защита от DDoS создана для отсева мусорных сетевых пакетов, но когда аварийный трафик с перегруженных узлов и соседних ДЦ начинает лавинообразно перестраивать маршруты, скрубберы фильтрации сами превращаются в узкое горлышко. Как только ложится защитный шлюз, весь трафик клиентов либо улетает в пустоту, либо запросы упираются в мертвую стену таймаутов. В итоге клиенты облака легли синхронно, породив идеальный идеальный шторм отказов по всей стране. З.Ы. Похоже, в смету на колокейшна пора вносить бронированные колпаки на крышу серверной. Типичный 🥸 Сисадмин

Пока зумеры спорят про длину RSA-ключей, алгоритмы SHA-256 и SSH-сертификаты... Опытный админ держит в руках настоящий приватный ключ от интернета 🙂 Типичный 🥸 Сисадмин

🌊 2035 год. Сидишь в землянке у костра и рассказываешь лесным белкам, почему монолит был в разы надежнее этих ваших микросервисов. Типичный 🥸 Сисадмин

🙏 Чебурнет обретает ГОСТы Товарищ майор решил, что отказоустойчивость интернетов в целом - это баг, а не фича. А для багов нужны жесткие регламенты. Провайдерам больше нельзя самовольно вносить IP-адреса корпоративных клиентов в белый список, потому что ловкие админы умудрялись прокидывать через них VPN-туннели наружу 🎩 Теперь сетевая изоляция обретает ГОСТ. Минцифры взялось за разработку единых правил для белого списка. Лавочку с операторской самодеятельностью прикрывают. Попадание в список централизуют... будето только через ходатайство профильных федеральных ведомств, согласование с органами безопасности и размещение всех мощностей на железе внутри РФ. Более того, еще с конца лета Минцифры прессует хостеров, требуя физически изолировать белые IP-адреса в отдельные подсети, чтобы рядом в случае чего не сидел левый сервис или обычный пользователь 😭 Типичный 👨‍🦳 Сисадмин

👮‍♂️ Следком закупает ИИ за 6,2 миллиона, чтобы искать связи между людьми и деньгами. На портале госзакупок обнаружился свежий тендер от СК РФ на поставку "программно-аппаратного комплекса для текстовой аналитики". Система должна уметь употреблять большие объемы неструктурированных данных и автоматически вытаскивать оттуда ФИО, должности, телефоны, почты, банковские реквизиты, суммы денег, а главное - строить графы связей между фигурантами, компаниями и событиями. Также ИИ будет анализировать ТЗ поставщиков при закупках. Цена вопроса - 6,2 млн рублей. Чет маловато, железо будет на игровых видюхах? 🤔 Типичный 👾 Сисадмин