Просто Devops

10 дней без единого алерта. Кайф? Расскажу историю знакомого с одного из проектов. Пришел в компанию, все гуд, проект там куберы пайплайны, все классно, мониторинг есть, всё настроено. А потом он открывает графану. Ошибка. Обновление - опять ошибка. Первая мысль, что что-то не то открывал, или доступ не выдали, или VPN не тот. Начал копать и выяснил, что у сервера, на котором жил весь мониторинг, просто сгорела материнка. Сервер мёртв, графаны нет, алертов нет. И так уже 10 дней. 10 дней. Никто не заметил. Узнали только когда на проект пришёл девопс (он был первым полноценным девопсом на проекте (до этого были неполноценные)), который попробовал этим мониторингом воспользоваться. И самое смешное (или страшное), что со стороны всё выглядело идеально. Чат с алертами молчит. Никто не пишет, что диск кончается, что сервис тормозит, что проц в потолке. Тишина и благодать. Если бы кто-то и посмотрел на этот чат, решил бы, что проект наконец-то стабилизировался и можно идти просить премию (они в целом так и делали). А теперь представьте, что за эти 10 дней где-то начал заканчиваться диск. Или потихоньку отваливалась реплика базы. Или сертификат подходил к концу. Мониторинг бы про это рассказал. Только рассказывать было уже некому и некуда. Вы бы узнали обо всём этом классическим способом — от пользователей. В нашем случае пронесло, но держалось всё буквально на удаче. То есть важно понимать еще и что мониторить, об этом подробно написали здесь. Вот тут и главная ловушка: отсутствие алертов не значит, что всё хорошо. Оно может значить, что алерты просто некому отправлять. Что с этим делать, если по-простому: Не держать всё на одной машине. Если мониторинг, алерты и логи живут на одном сервере, то одна сгоревшая материнка вырубает вам все сразу. Хотя бы проверка того, что мониторинг жив, и отправка уведомлении о его отказе должны работать независимо от этой машины. Устраивать учения. Раз в какое-то время специально ломать что-нибудь на тесте и смотреть, пришёл ли алерт, кому пришёл и понял ли получатель, что делать. Очень отрезвляет. Часто оказывается, что алерт настроен, но уходит в не в тот чат, или вообще не уходит никуда. Хоть иногда туда заглядывать. Банально, но если графану открывают раз в полгода, то и узнают о её смерти раз в полгода. В нашем случае хватило десяти дней, считай, повезло) Мониторинг — это такой же сервис, как и всё остальное: он тоже ломается, тоже падает и тоже требует присмотра. Просто, в отличие от остального, о своей смерти он сообщить не может, если вы заранее об этом не позаботились. ❤️ Буткемп

Вы много и регулярно писали нам об этом. И вот наконец у нас появилась поддержка зарубежных карт. Теперь оплатить буткемп можно прямо на платформе, находясь за границей. Без поиска друзей с российской картой и переводов через посредников. Условия прежние: доступ открывается сразу после оплаты и остаётся бессрочным. Все новые модули добавляются без доплаты, включая недавно вышедший модуль по PostgreSQL и Redis. Так что если всё это время вас останавливало только отсутствие российской карты, теперь можно заходить) 🖤 Буткемп P.S. Стабильность по MasterCard выше, чем по VISA

После ролика про базы на DevOps-собесах мы обещали вам шпаргалку. Ну а раз обещали, то сделали: дропнули её на нашей платформе. Внутри десять вопросов с короткими ответами и пояснениями, на что обращают внимание на собеседовании: - с чего начать, если база тормозит - зачем нужны индексы - как работают WAL - бэкапы и репликация - что мониторить в PostgreSQL - JOIN и ACID. Можно открыть на платформе или скачать PDF, чтобы перед собесом быстро освежить всё в голове. 📎 Забрать шпаргалку по базам А чтобы сразу проверить знания в деле, сделали несколько бесплатных задач на настоящем PostgreSQL. Прочитали разбор — сделали самостоятельно. 🖤 Порешать бесплатные задачи Попробуйте сначала ответить на вопросы без подсказок, а потом свериться со шпаргалкой. Так быстрее станет понятно, что помните, а что стоит повторить. В комментах можете написать, что у вас спрашивали про базы, если тоже сталкивались с ними на собесе

Бэкап есть? А если найду Недавно на ютубе разбирали, что спрашивают про базы на собесах девопса, и среди прочего там мелькал PITR. Слово страшное, штука полезная, так что давайте на примере из нашего нового модуля по базам. Вы девопс в сервисе доставки еды. Утро, кофе, а Олег Разрабыч тем временем запускает свой скрипт очистки старых заказов на тестовой базе. К обеду Олег Скриптович совершил прорыв в оптимизации: база сжалась чуть ли не до нуля, отчёты строятся моментально, а графики красивые как никогда. Есть всего одна мааааленькая загвоздка: DELETE ушёл в прод. Олег пока жив, у него просто отобрали доступ к проду. Но как вы думаете, кто будет всё это разгребать? Вы не ошиблись. Первая мысль — ночной бэкап. Только снят он в три часа ночи, и заказов, которые люди оформили с утра, в нём не существует. Откатитесь на него, и вместе с Олегом будете строить планы на будущее. Вторая мысль — реплика. Но она как самый исполнительный сотрудник в компании повторяет за основной базой всё и сразу. Олег Эскуэлыч сделал DELETE, и реплика повторила. Идём в зарубежную нейросеть, и она подсказывает, что делать. Постгрес любое изменение сначала пишет в журнал (WAL, его тоже разбирали в видео). Если складывать этот журнал в архив, можно взять ночной снимок и прокрутить на нём все изменения ровно до секунды перед шедевром Олега. Утренние заказы на месте, Олега будто и не существовало. Это и называется PITR. Но журнал должен копиться заранее, а восстановление надо хоть раз прогнать до инцидента. А не впервые в жизни на горящем проде, пока за спиной стоит Тимлид Следилыч и очень спокойно спрашивает, сколько ещё ждать. Тут у вас заканчиваются лимиты на AGI, и встаёт вопрос: где это прогнать и как научиться заранее? Как раз в новом модуле по базам есть практика ровно про это. Тимлид там Матвей, Олег там Олег, а вы настраиваете архив журнала, снимаете копию, ищете момент ошибки и отматываете базу на секунду до неё. А помимо Олега в модуле: • База тормозит или висит на блокировках, и надо найти виноватую сессию. • Основная база упала, и надо переключиться на реплику. Реплика отстала и не догоняет. • Redis с Sentinel: это такой надсмотрщик, который ночью сам переведёт приложение на копию, если Redis прилёг. • Мониторинг, чтобы про проблемы узнавать заранее и фиксить. Задачи мы собирали из своего опыта и из того, с чем к нам приходили люди с работы. Так что Олег выдуманный, а вот его DELETE вполне настоящий. У многих был свой Олег, после которого бэкапы перестали быть формальностью) Бесплатно можно потрогать первые три шага: почему кубер перезапустит упавший бэкенд, а с базой так не получится, что у постгреса под капотом, и практику, где вы поднимаете постгрес в докере так, чтобы данные пережили удаление контейнера. А завтра выйдет шпаргалка по базам из ролика, которую просили все, кто не хочет повторять успехи Олега. Модуль с базами открывается целиком сразу после покупки, и проходить его можно независимо от остальных. P.S. Кто уже в буткемпе, новый модуль доступен без доплаты, как и все будущие. 📱 Базы на собесах ❤️ Буткемп

«У нас тормозит база. С чего начнёте?» С этого вопроса чаще всего начинается блок про базы на собесе девопса. И часто вообще вводит в ступор, так как человек не ожидал, что девопса будут гонять по базам. На самом деле могут, и поэтому мы... Разобрали топ-10 вопросов по базам: репликация, бэкапы и PITR, WAL, PgBouncer, Patroni, мониторинг. 📱 Смотреть: https://youtu.be/uMnJaoH9wts А если хочется не только посмотреть, но и потрогать руками - мы открыли часть нового модуля по базам из буткемпа: три урока и практику на семь задач. 🐸 Попробовать: https://prostodevops.ru/l/bd-bootcamp Пора разбираться и в базах

«А как мне попасть в девопс?»🧐 Такой вопрос мы получаем очень часто. Специально для ребят, кто задает этот вопрос, мы запустили диагностику. Вы можете самостоятельно ее пройти на нашей платформе и узнать свой уровень знаний на данный момент. Но самое главное - после мы даем возможность записаться на бесплатную (пока что) консультацию с нашими действующими кураторами, которые уже отвели несколько потоков за руку на работу и сами являются девопсами с большим количеством опыта. Вы сможете получить полную оценку ваших знаний и опыта, а также получить конкретный ответ на заветный вопрос «А как же попасть в девопс?» Поскольку желающих становится все больше с каждым днем, специально для вас мы открыли дополнительно 120 слотов! Теперь места должно хватить всем. Мы ждем вас!😉 Ну а для тех кто знает чего хочет, у нас есть буткемп (по ссылке вот тут), где кстати уже вышел новый модуль по базам данных, который открыт всем после покупки Мы в телеграм

Друзья! Мы сделали тест для оценки уровня DevOps, он доступен по ссылке: https://prostodevops.ru/l/diagnostika-urovnya Но самое интересное, что после прохождения диагностики, вы сможете записаться на бесплатную консультацию, где мы: - разберем ваш результат - расскажем, как в лично вашем случае стоит изучать девопс - дадим рекомендации по карьере - ответим на ваши вопросы Пока что доступно 45 слотов, но мы будем ежедневно их пополнять

А вот и ролик по запросу из чата Разбираем чем отличается бэкенд от девопса, где проходит граница, какими инструментами пользуется и тот и тот, но в чем разница. Еще мы сделали тест для самостоятельной проверки своего уровня DevOps, пройти можно здесь: https://prostodevops.ru/l/diagnostika1 📱 Ролик тут: https://youtu.be/vFutwFk98eI

Дождались! Открываем набор на счастливый 7 поток сопровождения до оффера. Что это? Можете изучить тут: https://prostodevops.ru/l/nabor, но если вкратце, то это программа, в рамках которой мы проводим вас за руку по всему стеку девопса, готовим резюме, готовим к собеседованиям и помогаем выйти на работу в девопс. В этом месяце у нас рекорд - 40 трудоустройств, принимаем поздравления, но дальше - больше. Поэтому если вы сейчас работаете, например, в L1/L2 поддержке, сисадмином, разработчиком, и хотите попасть в девопс, то это отличная возможность. Да и на самом деле, даже если вы работаете не в айти, то тоже можете подавать заявку, у нас достаточно кейсов и по переходу людей не из ИТ-специальностей. А в прочем, посмотрите своими глазами: https://prostodevops.ru/l/nabor, там же можно записаться на созвоны, где мы расскажем обо всем, ответим на вопросы, и после этого начнем путь к вашему офферу. Ждем всех желающих на созвонах. Так же запись доступна через бота (клик)

Подключили нового провайдера рассрочек, чтобы было больше одобрений, теперь вместо одного банка там целых 15 (кто вдруг ранее получил отказ, можете попробовать снова). Плюс к этому добавились более долгие периоды рассрочек вплоть до 36 мес, вместо предыдущего ограничения в 12 месяцев, а это влияет на ежемесячный платеж, делая его меньше. В общем будем смотреть, интеграция заняла неделю, надеемся, что все было не зря) Вообще это все очень интересно и с ростом проекта мы уже не только DevOps'ы, но и FinOps, SecOps, TestOps и какие только Ops'ы возможны) 🐸 Платформа тут: https://prostodevops.ru/l/platforma2109