Account

Posts of Мамкін Архітектор

newest first

#721Text

В твітері побачив пост із серії "раніше було краще". AI забрав у автора радість від програмування. От типу колись можна було день просидіти над багою, добряче її віддебажити і отримати реальну насолоду. А зараз бездушні залізяки мало того шо роблять це за тебе, так ще й швидко. Непорядок. Сам я час від часу теж таке думаю. Але частіше навпаки: я кайфую від того, шо не треба залазити в деталі, бо агент може це все розрулити сам. Прямо сьогодні в мене зламався смарт-перемикач для акваріума. Я поставив інший, запустив промпт, шоб переналаштувати його в Home Assistant, і агент все зробив, поки я пив каву. А там треба local tuya, ключі, ідентифікатори, видалити, додати — одним словом метушня. Всі ці приколи з розрулюванням проблем з категорії "є шо згадати, нема шо на дейліку розказати". Бо день розбирання з багами не несе велью для бізнесу, а навпаки, є баластом. Типу ви покликали сантехніка поміняти кран, а він залив усю кухню, обрізав труби, потім їх заварив, переробляв декілька разів, а потім взяв гроші за день роботи і пішов писати пост в твітер про техніку зварювання. А наступний пост був про те, що в C# відбулись покращення: туди завезли union types. І тут дві думки: нарешті, через 20+ років фішка з F# дійшла до мейнстріму. А друга думка — а нашо воно треба? І не лише union types, нащо взагалі зараз розвивати мови програмування? Адже усі мови Тьюрінг-повні, тому ними можна вирішити будь-які задачі. Їх використовують агенти, а їм пофіг на фічі мови, експресивність та інші людські теми. Модель залюбки напише вашу фічу і на брейнфаку. Хіба шо придумувати нові мови, заточені під агентів. Зараз агенти добре працюють з людською мовою, проте цілком ймовірно, що спеціальна мова буде черговим проривом. Куди це все рухається, ми і уявити не можемо. Чи можемо? Напишіть в коменти, шо думаєте про це 🙂

Open in Telegram
Views1,366−44%vs avg
Forwards15
Reactions59
Comments23
Views growthHide views growth

Views growth

Hours after publication

Show as table
Hours after publicationViews
0 h0
65 h1,334
79 h1,366
  1. Total to date1,366
#719Text

Шо там було sophisticated? Ви мабуть чули, шо нещодавно ламанули Binance і вивели звідти понад шість мільярдів доларів. Доволі гучна історія в певних колах, хтось навіть встиг написати, шо це (черговий) кінець криптовалют. Binance вже випустили постмортем, і схема там доволі класична. Співробітника кличуть на інтерв'ю, дають тестове завдання, а в тестовому палені залежності, які крадуть креди. Почитати цікаво, але сьогодні я хотів написати трохи про інше. Попався мені твіт одного чувака, який обурюється, шо цю атаку назвали sophisticated. Він пише, шо фейкові рекрутери, фейкові інтерв'ю і отруєні тестові це доволі відомі речі, і так працюють вже роками. У самому твіті ще двадцять лінків на розбори цієї схеми, я почитав декілька — мені сподобалось. У цьому, наприклад, згадується **GuardDog — за описом доволі потужний сканер стрьомних залежностей. І далі OP твіта каже, шо Binance у своєму ж пості пишуть про відбиття 57 таких спроб. Тобто вектор вони знали добре, а розробник все одно запустив тестове завдання на робочому ноуті 🙈 Я з цим чуваком повністю згоден. Якщо ти знаєш вектор атаки, від нього треба захищатися, і по-хорошому мали б бути вжиті заходи, аби такого не допустити. А тут просто факап з підготовкою, і sophisticated в цій історії хіба шо сума, яку вивели. У нас якось був схожий випадок, тільки без інтерв'ю. Потенційний клієнт хотів, шоб ми підписали NDA через якийсь мутний чи то пакет, чи то скрипт (вже не пам'ятаю, шо саме там було). Ми вчасно це побачили і забанили його. Про атаки через пакети я колись писав в npm тижні, там теж було весело. Хоча чого було? Цей експрес несеться і досі, і ми усі маємо місця біля вікон. А ви що думаєте за злам Binance? Sophisticated чи ні?

Open in Telegram
Views2,120−13%vs avg
Forwards24
Reactions21
Comments8
#718Textedited

iTerm, гальмо і гіперлінки iTerm у мене вже давно час від часу починав гальмувати: натискаєш клавішу, а літера зʼявляється з помітною затримкою. Зазвичай я це терпів, потім перезапускав сам iTerm, і проблема вирішувалась. Але сьогодні подумав, шо з мене досить, і треба розібратись. Я ж архітектор, тому запустив ще одну сесію Claude Code у тому самому iTerm і кажу: > слухай, щось усе гальмує прямо зараз, розберись. Make no mistakes І ви знаєте, він розібрався. По-перше, він запустив sample. Це штатна команда macOS, яка профілює живий процес прямо в операційці. Я, наприклад, не знав, що таке є, і це прикольно саме по собі. У цьому семплі він побачив, що головний потік більшість часу сидить у функції executeLink:. Ця функція працює з лінками (OSC 8, щоб це не значило). Виявилося, що проблеми з лінками від сесій Claude Code, які ведуть на Remote Control. Також виявилося, що tmux до кожного такого посилання додає свій власний ID, і цей ID щоразу унікальний. Через це розростається iTermURLStore, сховище, куди iTerm ці посилання складає, і під час оновлення чи пошуку воно їсть до 100% процесора. Перезапуск iTerm допомагав, бо ця структура, схоже, очищувалась. Ще Claude Code пішов у сорси iTerm, знайшов те сховище і розказав, чого воно гальмує: 1. Ключ у сховищі це NSDictionary з адресою і параметрами лінка, тобто словник, який лежить в іншому словнику. 2. hash у NSDictionary дорівнює кількості його елементів (дуже цікаво чому так, напишіть в коменти, якщо знаєте 🙂 ). У кожного ключа елементів два, тому хеш у всіх ключів однаковий, 2, і пошук перебирає їх по одному. 3. У новій версії iTerm (3.7.7) ключ став iTermTuple, і його хеш рахується з обох значень, тож гальмувати не має. Він порадив оновитись. Я оновився, і проблема вирішилась. З нерозкритих лишилося питання, чому tmux додає цей ID. Виявилося, що він надсилає екран до зовнішнього терміналу шматками, і без ID термінал не може відрізнити одне посилання від іншого. А оскільки Claude Code — це TUI-застосунок, який доволі часто перемальовує сам себе, ці лінки в ньому перегенеровуються, і кожен отримує новий ID. Минулого разу tmux сказав, шо я не термінал, і там теж усе пофіксилось обновою. Тож якщо у вас на маці шось гальмує, не терпіть, а запускайте свого агента — хай розбирається. З вас лайк та історія, яку багу ви досі лікуєте перезапуском 🙂

Open in Telegram
Views1,982−18%vs avg
Forwards12
Reactions57
Comments8
#717Text

Хто зламає ваш сервіс Після зламу "Повітряної тривоги" фразу Федорова "роль кібербезпеки трохи перевищена" в твітері й інших соцмережах не згадав тільки лінивий. Експертів з кібербезпеки у нас багато, але, як у гадалок і розкладачів таро, їхні прогнози працюють лише в минулому часі: вони завжди знають, як треба було зробити раніше. Натомість давайте поговоримо про вектори атаки на ваш сервіс і зробимо такий собі рейтинг. На першому місці працівник бек-офісу, який не дуже шарить в компах. Він працює зі свого лептопа, на якому ввечері грає в доту, у браузері купа плагінів, і він охоче тисне на всі посилання від друзів і від людей, яких вважає друзями. Це, мабуть, найпростіший шлях у систему (команда alerts.in.ua у своєму розборі теж не виключає вкрадений акаунт чергового адміна). А дизайн системи ще й мультиплікує шкоду, коли роль оператора дозволяє більше, ніж їй треба: стягнути базу клієнтів, понастворювати фейкових транзакцій і тд. Шо з цим робити? Аудит усіх дій операторів і алерти на аномалії. Обмеження API по ролях, це і так зрозуміло, але ще й обмеження по обсягу. Якщо у вас є API, який повертає список користувачів з параметром page size, то дуже дивно виглядає виклик з величезним page size або серія запитів, яка пробує стягнути всю базу. Служба підтримки в реальному житті шукає одного користувача чи одну транзакцію, і перелік усіх їй не потрібен. API має бути побудований під use case, тоді вкрадений браузер оператора наробить значно менше шкоди. На другому місці розробник або девопс (девопс ще гірше), з доступом до даних, до продакшену, а може і до коду. Це технічні люди, які про таку небезпеку як мінімум чули, проте вони скоріше за все засліплені тим, шо в них все під контролем, і так само тиснуть на посилання в телеграмі. Рецепт схожий: аудит і least privilege (у кожного мінімум прав, потрібних для роботи). Коло людей з доступом до проду має бути дуже вузьким, і кожна їхня дія під аудитом, по якому стоять алерти (наприклад, Datadog це вміє). Розробникам на прод ходити не треба ніколи. Якщо вам кажуть "нам треба там шось задеплоїти чи подивитись логи", це неправда, і це вирішується іншими способами. Виняток один — breakglass, тобто аварійний доступ з окремим паролем, яким можна швидко закрити систему і всіх обмежити. Він обовʼязковий. Він не має залежати від інших сервісів: зовнішній провайдер автентифікації може лежати, і ви не залогінитесь, а під час outage у хмарного провайдера може лежати консоль, хоча API при цьому часто живий. На третьому місці зовнішні хакери, які шукають вразливості і ламають фаєрволи, проксі і тд. Тут, мені здається, ймовірність найменша, бо якщо все зроблено нормально, проникнути ззовні доволі складно, а цільові атаки на supply chain коштують дуже дорого. Можливо, ваша система гідна того, щоб на її злам витратили такий ресурс. Але тоді у вас має бути ресурс і на те, щоб від нього захиститись. Щодо сервісу та апки air alerts — я дуже поважаю їх розробників. Я трохи дотичний до цих людей і знаю, шо вони робили його на ентузіазмі з самого початку повномасштабного вторгнення, тому закидати їм зараз "ви там десь просрали" як мінімум неетично. Ну а з вас лайк та історія, хто з цього рейтингу вже заходив до вас 🙂

Open in Telegram
Views1,764−27%vs avg
Forwards22
Reactions68
Comments9
#715Text
Views2,499+3%vs avg
Forwards29
Reactions35
Comments16
#714Text
Views3,925+62%vs avg
Forwards105
Reactions29
Comments3
#713Text

Після постів про моніторинг згадав ще одну штуку, яку періодично бачу в командах: алерти вирішують робити прямо в коді сервісу. В одному проєкті так і було, там почали писати інтеграцію з SMTP, кастомні вебхуки, логіку, яка ці алерти будує, і постінг у Discord, здається, теж. Ну а чо, ми ж програмісти. Є задача — давайте її закодимо. Проблема в тому, що цей код треба підтримувати, як і будь-який інший код у сервісі. Не прилетів алерт — прилітає тікет, і хтось із команди замість фічі колупається з нотифікаціями. Замовник захотів нотифікації в телегу (бо успішні люди користуються телегою — це не прикол), і знову розробка, ревʼю, деплой та підтримка. В той час як готові сервіси, які виконують ці функції, просто існують. Я рекомендую розділяти обовʼязки і завжди використовувати готове перед тим, як писати своє. Від вашого сервісу потрібні метрики й сигнали: шо болить, наскільки сильно і як давно. А доставку, роутинг, вибір каналу й ескалацію хай робить окремий готовий сервіс, який підключається через інфраструктуру. Той самий Alertmanager з попереднього посту або будь-який інший, у них купа готових інтеграцій і battle-tested код, який до вас уже хтось зламав і полагодив. Взагалі це старе питання про те, ким ти себе відчуваєш на проєкті: розробником, якому хочеться все написати самому, чи більше девопсом, який спершу шукає, шо вже є. Писав про це колись давно. Раніше я б писав, зараз точно треба брати готове. Проте з AI-агентами все трохи заплутується. Написати свій маленький Alertmanager під себе, саме з тими каналами й правилами, які вам треба, тепер можна за той самий вечір, ще й з тестами, і воно буде дуже добре працювати. Але це добре для пет проєктів, а за гроші краще використовувати готове і перевірене. До речі, простий тест на вибір оптимального рішення, який підходить і для інших сценаріїв. Уявіть, що весь час, який ви витрачаєте на забезпечення роботи алертингу, вам не оплачується. А за простої, викликані його неправильною роботою, вас штрафують. Тобто можете три дні писати свій алерт менеджер, але в чеку за місяць сума буде меншою. Що тоді оберете?

Open in Telegram
Views2,556+5%vs avg
Forwards7
Reactions22
Comments9
#712Text

Під попереднім постом про моніторинг у коментах спитали: «А що конкретно робити?» Я пошуткував, шо напишу про це у закритому платному каналі, але поки його немає, закину сюди. Отже, беремо Prometheus, Alertmanager і Grafana, це все ставиться в Compose одним стеком. З боку сервісу можна публікувати кастомні метрики, але для старту можна обійтися і без них, досить метрик машин. Для цього ставимо Node Exporter, який збирає купу різноманітних метрик про стан сервера, де в нас усе запущено. Низький рівень вільного місця на диску там якраз буде видно, а з ним і інші аномалії, як-от високе використання CPU, тротлінг і тд. Якщо сервіси крутяться в Compose, додаємо cAdvisor, і тоді схожі метрики будуть ще й по кожному контейнеру. В коментах мені точно порадять щось більш модне-молодіжне. І будуть праві, але я просто показую перевірену класику. Також можна додати дефолтних метрик з рантайму: кількість вільних потоків у пулі, підключення до баз даних, затримки на зовнішні виклики, відсоток успішних запитів тощо. У випадку «Дрони на районі» я ще пододавав статистику з Cloudflare: унікальні користувачі, відсоток закешованих відповідей, загальний трафік. Як тільки почнете це робити, одразу зʼявлятимуться все нові кандидати, адже не можна щось оптимізувати, не вимірявши це спочатку. Алерти заводимо у ваш робочий месенджер, і наче все готово. Але ніт, все лише починається. Навколо цього обов'язково треба будувати процес, інакше вийде той самий канал, куди ніхто не дивиться. Усі алерти мають бути відпрацьовані. Ті, які автоматично закриваються або ігноруються, треба регулярно переглядати, наприклад щотижня. Так само регулярно треба перевіряти, чи вони взагалі ще актуальні. І кожен алерт має бути actionable: якщо з ним нема шо робити, це вже не алерт, а шум, і його треба прибрати. Ну а далі, next level, можна додавати сервіси типу PagerDuty, які будуть дзвонити вночі в телефон. Взагалі весь процес треба будувати так, щоб алерти завдавали команді певних незручностей. Тоді команда сама зробить усе, аби їх не було. А можна піти ще далі й налаштувати агента, який регулярно моніторить і за допомогою того ж самого Jev аналізує проблеми і як мінімум одразу створює баги, а в ідеалі ще й виправляє, перевіряє та деплоїть. Але про це вже точно напишу в закритому каналі. З вас лайк і назва сервісу, який ви використовуєте замість пенсіонерського набору 🙂

Open in Telegram
Views2,220−8%vs avg
Forwards32
Reactions49
Comments12
#711Text

Уявіть ситуацію: п'ятниця, кінець робочого дня. Всі шукають п'ятничні меми і думають, що будуть робити ввечері. Аж тут прилітає тікет із сапорта про те, що критичний процес не працює. Зі словами "oh shit here we go again" починаєте розбиратись, бачите помилки на сервісі, колупаєте далі — і виявляється, що на сервері тупо закінчилось місце на диску. І замість бару вечір п'ятниці витрачається на пошук того, хто може збільшити місце чи почистити зайве, перезапустити (вручну звісно) підвисші транзакції, перевірити і позакривати запити. Типова айтішна весела метушня. Знайомо? Дуже дивно, що багато production-систем, прям дуже багато, не дуже переймаються моніторингом і алертингом. І кожен такий випадок для них — челендж. І тут хочеться згадати мем про те, що якщо не вчити в школі фізику, то життя буде наповнене чудесами і пригодами. Так само і тут: якщо не вчити базові навички з того, як працювати з продакшен-системами, то життя також буде наповнене різними пригодами і героїчними способами їх вирішити. Є люди, яким подобається вирішувати проблеми. Їм це настільки подобається, що вони мимоволі ці проблеми створюють. Але якщо ви цінуєте свій час і дбаєте про надійність ваших систем, моніторинг — це перше, що має бути додано, до того, як все полетить у продакшен і у вас з'являться перші клієнти. На самому початку роботи над системою, коли ви плануєте deployment та розписуєте нефункціональні вимоги (NFR), одразу треба закладати підвалини для моніторингу, налаштування алертів і роботи з ними. Зараз це дуже просто робиться за допомогою AI-асистентів. Вам не потрібен досвідчений девопс, який знає, як налаштувати Prometheus чи завести метрики в Grafana. Тоді алерт прийде ще у вівторок, коли диск заповниться на 80%, ви його планово закриєте, і бар у п'ятницю переносити не доведеться 🙂

Open in Telegram
Views2,150−11%vs avg
Forwards13
Reactions51
Comments20
#710Photoedited
Views2,555+5%vs avg
Forwards25
Reactions56
Comments15
#709Link preview

Ключ, який дорівнює 4 Є старий комікс xkcd, де функція getRandomNumber() просто повертає 4, з коментарем, шо число вибрали чесним киданням кубика. Ми думали, шо це жарт. Проте індійський центр сертифікації eMudhra, який флексить шістдесятьма мільйонами виданих сертифікатів, довів цей прикол до проду. Один з приватних ключів їхніх проміжних CA виявився числом 4. Інші були трохи кращі: 56, 115, 237 і тд, менші за 256, хоча там мало б стояти випадкове число на 384 біти. Ви це точно знаєте, але інші читачі може і ні: проміжний CA (або Certification Authority) підписує сертифікати. Хто має його приватний ключ, той може випустити валідний сертифікат на будь-який домен, хоч гугл, хоч ваш банк. Красти ключ для цього не треба, бо його можна порахувати з публічного сертифіката. Рахується швидко, бо він маленький 🙂 17 жовтня один чувак це виявив і запостив в спеціальну групу для розробників браузерів повідомлення, підписане скомпрометованими ключами. Браузери сертифікати заблокували. В цілому звучить так, що палені сертифікати не працюватимуть, якщо ходити на ресурси з браузерів. Проте curl та його друзі - реалізації HTTP клієнтів у Python, Node, Go і Java на CT (Certificate Transparency, публічний журнал усіх виданих сертифікатів) не дивляться, відкликання частина з них не перевіряє взагалі, і під час перевірки вони без палева прийняли підроблений сертифікат на API Stripe. Чого воно так сталось? Вендор каже, шо це human factor. В скрипт випуску ключів попала помилка, яка генерувала слабкі ключі, а потім переплутали лупу і пупу та якось випустили їх в прод. На моєму маку вбудовані /usr/bin/curl і /usr/bin/python3 (macOS 26.5) відкрили тестовий сайт з цим ланцюжком і повернули 200, без жодного попередження, бо використовують власний /etc/ssl/cert.pem, а апдейт браузера їх не обходить. Тож якщо у вас на серверах крутяться скрипти, які ходять в API по HTTPS, оновіть ca-certificates, certifi і рантайми, список версій є на сторінці дослідника. Браузер ключ 4 не надурить, а от cron-джобу, яку два роки ніхто не чіпав, цілком.

Open in Telegram
Views3,056+26%vs avg
Forwards39
Reactions37
Comments2
#708Photoad
Views2,369−2%vs avg
Forwards6
Reactions33
Comments3
#707Text

Нащо вдома RAID Пересічному користувачу компʼютера це, мабуть, і не треба. Один диск, одна копія, працює — добре, зламалось — плачемо. В мене диски не ламались ніколи. Але якщо у вас сервер, то зламаний диск це точно простій в роботі або ж втрата даних. Залізо ненадійне завжди, є вірогідність відмови, і питання лише в ціні простою та ціні відновлення. Зменшити ціну відмови можна за допомогою надлишковості. Наприклад, додати ще один диск і писати в обидва. Один помер, другий працює. Це вже RAID. Проте ефективна ємність вдвічі менша за куплену, а запис чекає на повільніший з двох. Назву Redundant Array of Inexpensive Disks (Inexpensive потім поміняли на Independent) придумали в 1988-му році (я загуглив). Починалось все з пʼяти рівнів. Перший це просто дзеркало, пʼятий це parity: мінімум три диски, дані розмазані по всіх плюс контрольний блок, один падає, з двох інших усе рахується назад. Все шо між ними — варіації. Потім допридумали шостий з двома parity, десятий, де дані так само розмазані, але вже по дзеркалах (stripe), і тд. Сам я по роботі нічого з цього не ставив, це робили бородаті хлопці в світерах, але цікавився і читав про це. Наприклад, що в Google диски тримались на липучках, бо ламаються найчастіше: помер, відірвав, приліпив новий. Google ще в 2003-му писав, що RAID не використовує взагалі, бо надійність вони робили в софті, реплікацією між машинами, а диски брали дешеві споживчі. На старті усе це робили спеціальні RAID-контролери. У мене, до речі, є старий Compaq ProLiant на Pentium II з живим контролером і кошиками під диски. Раніше він коштував як нова автівка, а зараз дає змогу насолодитись старою школою технологій у себе на балконі. Коли я писав цей пост, то думав, що програмний RAID зʼявився відносно недавно, але ніт. Просто масовим для споживачів він став, коли зʼявились NAS-дистрибутиви з веб-мордою і подешевшали диски. От я ще в 2024-му поставив собі TrueNAS. Під капотом там ZFS, і виявилось, що це файлова система, яка сама і є RAID: вкидаєш диски, кажеш, скільки з них можуть померти одночасно, і далі вона сама. Плюс кеш в оперативці, а за бажання ще й на SSD. Докинеш апки й доступ ззовні (або через tailscale), і вже маєш свій private cloud. Нащо воно треба, якщо є простий cloud? Бо провайдери блокують акаунти без пояснень, а розблокувати майже нереально. Була історія у 2022-му: Google закрив акаунт батькові за фото дитини для лікаря, поліція злочину не виявила, проте Google апеляцію відхилив і все видалив. Усі фотки, пошта і тд. Страшно собі уявити. Але навіть без цього воно просто цікаво, а це вже привід завести собі сервачок. З вас лайк і порада, який RAID брати під чотири диски 🙂

Open in Telegram
Views2,327−4%vs avg
Forwards10
Reactions32
Comments27
#706Link previewedited
Views2,960+22%vs avg
Forwards21
Reactions7
Comments14
#705Text

На дружньому каналі Devs Hive прочитав пост про Terragrunt і шось навалило спогадів. Я використовував Terragrunt колись, коли отримав у спадок купу Terraform. Мені тоді не сподобалось, шо в тому Terraform купа тексту, з яким важко працювати. Дуже складно робити якісь абстракції, і по факту там треба все копіпастити. Так той стек і був побудований. Нам треба було перенести той стек на нашу інфру. Тоді ще не було AI-агентів, і працювати з цим було, ну, таке собі задоволення. Я розумію, що для девопсів це, мабуть, не проблема, бо вони звикли працювати з HCL, YAML, взагалі з текстовими конфігами. Але моє програмістське нутро чинило цьому опір, тому я почав шукати інструменти, які б допомагали з цим впоратись. Так я знайшов Terragrunt і взяв його саме за можливість мати однакову конфігурацію, яка може кастомізуватись під певний environment. Звісно, можливо, є інші, більш правильні методи зробити це через Terraform-модулі чи ще якось. Проте на той момент Terragrunt здавався найбільш логічним шляхом, і саме за його допомогою нам вдалося вирішити проблему. З Atlantis теж не все було гладко. Atlantis — це така штука, яка дозволяє GitOps для Terraform. Для підтримки Terragrunt треба було трохи поприсідати, але це вже було давно. Це 2022 рік, а з тих пір багато чого змінилося, і зараз, можливо, воно неактуальне. Зараз я би використовував просто Terraform. Власне, я так і роблю, тому що AI-асистенти вирішують всі ці проблеми доволі просто. Для них не проблема і темплейтинг зробити якийсь, і накопіпастити. Тому актуальність таких речей для мене знижена, скажімо так. І ще: того разу ми на Terraform все перенесли, але потім перейшли на AWS CDK, тому що там саме програмний спосіб роботи з оточенням. І от CDK мені свого часу сподобався більше. А ви шо думаєте?

Open in Telegram
Views3,712+53%vs avg
Forwards4
Reactions13
Comments7
#703Text

Оновив Portainer однією кнопкою Я вже не раз розповідав, як влаштований мій homelab: є сервер на Umbrel, на ньому Portainer, а в Portainer крутяться мої саморобні сервіси, Bankoscan, Дрони на районі і тд. Якось ото сиджу, фіксаю шось у дронах (а там завжди є шо пофіксити), і докручую моніторинг. Аж тут вилазить помилка, і агент пропонує оновити Portainer в якості фіксу. Оновити його просто, бо в мене ж Umbrel (якщо не знали, це такий user-friendly Linux, який має свій App Store, де застосунки встановлюють і оновлюють кнопкою). Зайшов на Umbrel, дійсно є пропозиція оновитись, тицьнув кнопку, а далі як в анекдоті: "сиджу, колупаюсь цвяхом у вусі, і раптом бац — звук пропав". Umbrel перестав відкриватись, а в Telegram посипались алерти: відвалився сам Umbrel, GitLab, Grafana і ще кілька сервісів. При цьому Дрони на районі спокійно працювали далі, що було дуже добре, бо якраз була тривога. Оновлюватись я все одно хочу постійно, просто інфру, мабуть, краще чіпати в тихі години, і заодно зробити її такою, шоб апдейт однією кнопкою не клав половину homelab. Почав розбиратись, і знову проблеми з Tailscale. Старі хости в tailnet перестали відповідати, натомість зареєструвались нові з тим самим іменем, тільки з -1 в кінці. Виявилось, шо Umbrel запускає Portainer як docker-in-docker, і оновлення застосунку просто перестворює цей контейнер. Переживає таке тільки його /data, а мої стеки тримали свій state поруч, у /home/umbrel/homelab-data, звідки його знесло. Tailscale-ноди забули, хто вони, а Prometheus втратив усю базу, 130к метрик (про це алертів не було). Розгрібали це з агентом приблизно годину (сам я б залип на пару днів точно). Дані стеків переїхали під /data, шоб наступне оновлення їх не чіпало, а Prometheus тепер щоночі бекапиться на TrueNAS і алертить, якщо база раптом обнулилась. Прикольно, шо самі образи, як і дашборди Grafana, при цьому нікуди не ділись, схоже, бо лежали якраз у /data. Але осадочок, як кажуть, лишився. Чому це сталось? Бо для моїх потреб ванільного Umbrel недостатньо. Мої смаки доволі специфічні, і не налазять на opinionated конфіг Umbrel, насамперед на конфігурацію Tailscale. Тому коли шось оновлюється, дефолти перезатираються і перед очами постає мем "oh shit here we go again". Схожа історія в мене була з TrueNAS, де також є можливість "просто" ставити апки. Там одна з них посередині апдейту розгубилась і в результаті не можна було ні відкотити, ні накатити. Я декілька разів пробував це полагодити з консолі, і все безрезультатно. Аж поки не натравив туди Claude Code, який за 5 хвилин підняв усе. Тож з Umbrel, схоже, треба валити. Поставити собі якогось Debian, і горя не знати. Бо головна перевага Umbrel — його простота і UIшність — для мене не працює: все там я роблю через ssh, та і не я роблю, а агент. З вас лайк та історія, як у вас апдейт однією кнопкою поклав прод 🙂 Або порадьте, шо можна взяти замість Umbrel (його оновлення, якщо шо, досі висить)

Open in Telegram
Views3,534+46%vs avg
Forwards9
Reactions39
Comments14
#702Link preview

Обіцяв технічні подробиці по Дронам на районі, тому ось вони. Стек частково вже називав: Python, htmx, трохи JavaScript для інтерактиву. Service worker, щоб сайт відкривався в офлайні і сам казав, що карта вже неактуальна. Cloudflare тримає тунель, захист від ботів і CDN. Google Analytics стоїть, щоб бачити, чим люди реально користуються, і з цього вирішувати, що робити далі. Deployment максимально дурний: Docker Compose збирає образ прямо під час деплою, без зовнішнього registry. Крутиться воно в Portainer, який живе в Umbrel на домашньому сервері і раз на хвилину підтягує main. Gitlab також на Umbrel. Спочатку я хотів винести це на безкоштовну віртуалку в GCP, щоб не залежати від домашнього світла, але там portainer-агент не вміє проксювати BuildKit, і збірка падає з http2: frame too large. Переніс додому, шоб швидше вийти в прод. Моніторинг — Prometheus і Grafana, які й так підняті в моєму homelab, плюс Uptime Kuma, щоб знати, що сайт взагалі відповідає. Проте найгірша поломка тут не "сайт впав", а "сайт віддає 200, а дані в ньому тригодинної давнини". Жоден зовнішній пробник такого не побачить, тому окремою метрикою я віддаю вік останнього успішного забору по кожному джерелу, і алерт висить саме на ній. Всередині немає ніяких AI- чи ML-тулів, там набір if-ів, регекспів і маленька state machine. Працює доволі непогано. Зберігається кожен пост з каналів і кожне рішення, яке по ній ухвалене. Періодично переганяю цю історію через Claude Code і дивлюсь, де алгоритм можна покращити, і вже з цього правлю правила. В результаті воно стає краще. По суті проект — це реверс інжиниринг. Десь є системи, в яких дрони показані точно, доступ обмежений з відомих причин, хтось транслює звідти інфу текстом, а сайт мапить це назад на мапу. Звучить тупо, але дуже інтересно. Тестується все агентом, який запускає playwright-cli. Ним же і перевіряє баги. Також є юніт тести, зараз десь 500, http залежності тестуються через vcr. А і мало не забув — Redis тут немає, натомість SQLite, бо з ним банально швидше вайбкодити. Файл лежить поруч з процесом, схема міняється на льоту, нічого не треба підіймати окремим контейнером і потім за ним доглядати. По перфомансу питань нема взагалі. Кількість користувачів росте, покращення залітають, все добре. Іроні в тому, що це саме той проект, де хотілось, аби він не був нікому потрібен. Але хочеться одного, а реальність підносить інше, тому будемо поки його розвивати. Пишіть в коменти ідеї, зауваження і побажання. Також попрошу пошарити серед друзів, сусідів і колег.

Open in Telegram
Views3,261+35%vs avg
Forwards32
Reactions61
Comments22