Просто Devops
27.6K subscribers
117 photos
4 videos
10 files
160 links
Платформа: https://prostodevops.ru/l/kanal
Отзывы: https://t.me/prosto_devops_reviews

Менеджер - @devmoder
Матвей - @greghouse134
Миша - @misha_devops
Ютуб - youtube.com/@prosto_devops

Бот - @prostodevops_bot
Download Telegram
ВОПРОСЫ.

Друзья!
В телеграме вышло обновление, теперь есть возможность написать прямо в личку канала. Для этого надо обновить телегу.

Теперь вы можете писать в лс канала, и мы ответим в чате.

В связи с этим бота для вопросов в скором времени отключим, чтобы все сообщения были в одном месте.

Так что обновляйтесь и приходите в лс канала, будем рады пообщаться!
🔥17❤3
Штука, без которой CI/CD просто не работает.

CI/CD то, CI/CD это...
Ну там гитлаб, дженкинс, дев и прод, типа автоматизация развертывания.

И в этом всём есть важная сущность — хранилище артефактов. Будем говорить про Nexus.

ЧТО ТАКОЕ АРТЕФАКТ?
По-умному: артефакт — это элемент продукта, который создается в процессе сборки. Это могут быть исполняемые файлы, бинарники, пакеты и т.д.
По-простому: это всё то, что получается после того, как ваш код превратился во что-то готовое к использованию.

ЧТО МОЖЕТ БЫТЬ АРТЕФАКТОМ?
Nexus поддерживает разные форматы артефактов:

— Docker образы
— Maven (JAR) — Java библиотеки и приложения
— npm пакеты — JS/Node.js зависимости
— Python PyPI — Python библиотеки
— Ruby Gems — Ruby библиотеки
— RPM/DEB пакеты — системные пакеты linux
— NuGet — .NET библиотеки
— Go модули — Go зависимости
— Helm charts — Kubernetes приложения

И еще куча других форматов. Если оно собирается — Nexus его умеет хранить.

ЗАЧЕМ НУЖНО ХРАНИЛИЩЕ АРТЕФАКТОВ?
Растёт инфра — растёт количество артефактов, появляется потребность в их централизованном хранении. Почему:

1. Не зависеть от доступности Docker Hub, npm registry и других внешних сервисов. Если что-то из этого упало или недоступно по сети — мы по-прежнему можем собирать и отгружать.
2. Образы и пакеты мы получаем из кэша Nexus, если они были загружены ранее, а не из самих регистров. Это сильно ускоряет сборку и уменьшает внешний трафик.
3. Чтобы подтянуть в сервис клиент другого сервиса, разработчику не нужно указывать путь до репозитория с этим клиентом. Также ему не нужен непосредственный доступ к этому репозиторию.
4. Контроль за тем, какие внешние зависимости установлены, контроль лицензий и уязвимостей.

То есть хранилище обеспечивает надежный доступ к артефактам, ускорение билдов, безопасность и ещё это удобно.

КАК NEXUS РАБОТАЕТ?
Nexus использует три типа репозиториев:

HOSTED — артефакты сборки кода собственных проектов
PROXY — кэшируют сторонние артефакты для сборки кода
GROUP — позволяют объединить hosted и proxy репозитории в группу для единого доступа

КАК NEXUS ВПИСЫВАЕТСЯ В ИНФРАСТРУКТУРУ?
Стандартная схема выглядит так:
— Коммит в Git
— CI/CD инструмент (Jenkins/GitLab) триггерит пайплайн сборки
— Система сборки создает артефакты
— Артефакты пушатся в Nexus
— Системы деплоя пуллят артефакты из Nexus для развертывания

Например, в том же дженкинсе можно настроить автоматическую загрузку артефактов в Nexus после каждой успешной сборки.

КАК РАЗНЫЕ СУЩНОСТИ ПОЛУЧАЮТ АРТЕФАКТЫ?

Docker (настройка докер демона):
{
"insecure-registries": ["nexus.prosto-devops.ru:5000"],
"registry-mirrors": ["http://nexus.prosto-devops.ru:5000"]
}


Maven (В pom.xml прописывается репозиторий):
<repositories>
<repository>
<id>nexus</id>
<url>http://nexus.prosto-devops.ru:8081/repository/maven-public/</url>
</repository>
</repositories>


npm:
npm config set registry http://nexus.prosto-devops.ru:8081/repository/npm-public/


Это должно немного пролить свет на устройство CI/CD.

И как всегда — пишите в комменты (или лс канала), о чем ещё рассказать.
🔥29👍14❤8🤯2
И ТАКОЕ БЫВАЕТ

Вчера выкладывали новые собеседования в закрытый канал.
Одно из них пошло под нож, но не потому, что кандидат плохо отвечал, а потому, что это никак не девопсерское собеседование.

Позиция джуна, это важно.
Давайте пройдемся по вопросам:
— в чём разница между C и Java?
— чем C++ от всех отличается?
— в чём разница между функциональным программированием и объектно-ориентированным?
— что такое класс в C++?
— в чём разница атрибута и структуры данных, которые в классе?
— что ещё есть в классе?
— задачка на логику: 8 шаров одинаковых, нужно найти тяжёлый - сколько взвешиваний?

И так далее. Всего задали около 40 вопросов, из них всех был только один вопрос по куберу. ОДИН. Из всего "девопсерского" собеседования.

Очевидно: либо тут нет девопсов, либо компания не понимает, кого ищет.
В любом случае — редфлаг.

Как джун будет разворачивать или поддерживать инфраструктуру, при том, что никогда ни с чем подобным не работал — не ясно. Как джун-девопс будет писать на C++ ещё непонятнее.

Такие собеседования должны быть флажочком: что-то не так, надо оставить их приходить в себя, а самим просто идти на другие собесы.

Если кто-то встречался с чем-то подобным, поделитесь в комментах. Интересно почитать.

Всех с началом рабочей недели
❤34😁18🔥4🤡3👍1
📱 На ютубе новый ролик "Вся суть ANSIBLE", в дополнение к нему выходит этот пост.

ЧТО ТАКОЕ ТЕМПЛЕЙТЫ В ANSIBLE?

templates, они же шаблоны, нужны, чтобы автоматически подставлять переменные и генерировать итоговые конфиги, скрипты или любые другие файлы прямо во время выполнения плейбука. По сути, это способ сделать инфраструктурные файлы динамическими и адаптивными под разные окружения, сервера и задачи.

КАЙФ ТЕМПЛЕЙТОВ

1. Один шаблон — много разных итоговых файлов, в зависимости от переменных.
2. Изменения в одном месте — но работает по-новому на всех серверах.
3. Можно хранить секреты отдельно и подставлять их только при деплое.

СУПЕР ПРОСТОЙ ПРИМЕР

Допустим, у нас есть шаблон для nginx-конфига: nginx.conf.j2:
server {
listen 80;
server_name {{ server_name }};
root {{ web_root }};
}


В Ansible-плейбуке используем template:
- name: Копируем nginx-конфиг на сервер
template:
src: nginx.conf.j2
dest: /etc/nginx/nginx.conf


А переменные (server_name, web_root) задаём в vars или inventory:
server_name: prostodevops.ru
web_root: /var/www/html


В результате на каждом сервере будет свой уникальный конфиг, но шаблон — один.

ГДЕ МОЖНО УВИДЕТЬ

— Конфиги для nginx, apache, systemd, sshd и других сервисов.
— Скрипты запуска, unit-файлы, даже bash-скрипты.
— Любые файлы, где нужны переменные и автоматизация.

На собесе в целом достаточно сказать, что это джинджа-2 файлик, который динамически генерит конфиг-файлы или скрипты на основе переменных.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥17❤8👍2
Как устроиться девопсом без опыта?

На выходных у нас прошел эфир в закрытом канале, где у каждого участника была возможность пообщаться с нами и задать любой вопрос.
Мы решили выложить наиболее интересные вопросы сюда несколькими постами и это — первый из них.

Устроиться без опыта НЕ-ВОЗ-МОЖ-НО.
Почему? — Потому что, банально открыв вакансии на хх, видим, что минимум год нужен везде, а чаще больше.

И такая ситуация не только с девопсом, но и с другими айтишными вакансиями. Исключение, куда опыт не нужен — стажировки. Туда можно попасть, пройдя отбор и хорошо написав тестовое задание, (и то, сейчас даже на стажировках можно встретить пунктик "желательно с опытом"). Но, в целом, вариант имеет место быть. Целый РОАДМАП по входу в девопс через стажировки публиковали ранее.

Стажировка подойдет не каждому. И что делать если опыта нет, а на стажировку не хочется?

Тут тоже есть несколько вариантов.

Можно пойти в техподдержку, администрирование, да и вообще любую подобную специальность, чтобы получить официальный опыт по трудовой.
Порог входа здесь ниже, да и спрос среди соискателей на подобные вакансии не такой высокий.
Конечно, на них тоже могут писать требования по опыту от года и выше. Но что поделать, напишите себе резюме с годом опыта тех. поддержки, в любом случае с этим разберется любой более-менее уверенный пользователь пк.
Всё, вы попали в компанию, есть трудовая. Работаем 9+ месяцев, дальше можно начинать переходить в девопс на джуна или даже мидла, подшаманив резюме.

Есть и третий вариант — для самых смелых.
В наглую крутить 3+ года опыта в резюме, идти по собесам, ловить вакансии.
Здесь есть сложности, надо понимать: как устроенны процессы в айти, какой стек используется, как выглядит девопсерский процесс, какие бывают задачи и прочее-прочее. Этой информации структурированно нигде нет (не ну мы конечно сделаем полное руководство, просто пока такого не найти). Поэтому если у вас нет знакомого или того, кто может помочь и рассказать, че вообще происходит — скорее всего не выйдет.

Итого:
1. Стажировки
2. Вход через смежные вакансии а-ля тех. поддержка
3. Наглая накрутка

Это три рабочих способа.

Кстати по каждому будет подробный роадмап. (по стажировкам уже есть)

Без реального опыта девопсом устроиться ВОЗМОЖНО, но с пустым резюме — НИКАК.

Всем хорошей недели, скоро ещё посты. 🤝
👍39❤10🤯5🔥2
ПРО РЕДФЛАГИ.

"Я боюсь, что буду работать в плохих условиях и из-за этого выгорю". - Нечто подобное часто нам пишут в личку.

Плохие условия для каждого разные. Да, большая часть будет повторятся, но будут и уникальные, чисто для конкретного человека.

Простой пример: ночные релизы.
Кто-то скажет, что ему норм, потому что и так ведет наполовину ночной образ жизни. А кто-то скажет, что вообще никогда на такое не подпишется и сон - это святое, и вообще есть рабочий график, так что не надо заставлять работать ночью.

И такого может быть много:
— Дежурства - кому-то ок, кому-то нет
— График работы - кому-то только удаленку подавай, кому-то наоборот хочется посещать офис
— Один девопс в команде / несколько
— Пул задач (хотя бы примерный)
— Страховые и соц. пакеты
— Бонусы от компании
— Техника
Этот список можно продолжать бесконечно.

Перед тем, как устраиваться на работу, хорошо продумайте список своих требований, желаний и редфлагов по отношению к будущей работе. Уточните всё у HR.
Лучше чуть больше времени потратить на поиск максимально подходящего места, чем потом постоянно мучиться из-за каких-то условий, круглосуточно думая об увольнении — вот это точно турбо-путь к выгоранию.

Напишите в комментах свои главные редфлаги к компаниям, а так же основные требования. Составим общий большой список вещей, которые стоит уточнить у HR.
❤28🔥3👍2😱2
НОВЫЙ КУРС

Продолжаем захватывать степик, выпустили фундаментальный курс по гиту - https://stepik.org/a/243921

Если может быть так, что вы не будете работать с условным докером, линуксом, ансиблом и тд, то git будет всегда и везде.

Поэтому овладевайте навыком - это, что называется, БАЗА.

Всем хорошего завершения рабочей недели 🤝
🔥37🤯7🥱6❤3🤩1
Forwarded from Сложно Devops
РЕАЛЬНОЕ ТЕСТОВОЕ С СОБЕСА

Пишет нам недавно один из наших ребят, которых ведем до оффера и рассказывает про свое тестовое.

Дали такую вводную: все задачи нужно решать так, чтобы подготовить сервер к боевой нагрузке (сейчас он не под нагрузкой, и с ним можно делать всё что угодно). Сделанные вами настройки должны быть оптимальны и персистивны (постоянные). Допускается работа приложений в одном экземпляре.

Казалось бы, обычное тестовое для девопса. Три задачи, всё стандартно:
— Сервер должен отвечать "hello" на порт 8666 на локальном интерфейсе
— Запустить приложение из /opt/app в Docker с доступом по порту 80 (время ответа менее 1 секунды) + MySQL
— Починить бинарник /root/sysadmconfig

Так-то выглядит легко и адекватно 🤣

Но по факту, открываем сервер и что видим:
— Ubuntu 16.04 (которая умерла в 2021 году)
— Docker Compose версии 1.8 (!!!!)

Для тех, кто не в курсе: Docker Compose 1.8 — это 2015 год. ДВЕ ТЫСЯЧИ ПЯТНАДЦАТЫЙ. Там еще networks не завезли, а использовали links для связи контейнеров.

links — это старый способ связи контейнеров, который просто добавлял IP-адрес и имя одного контейнера в /etc/hosts другого контейнера (работал только в одну сторону).
networks — современный подход, создает полноценную виртуальную сеть, где контейнеры могут общаться друг с другом по именам в обе стороны, плюс есть изоляция и всякие доп. фичи.

Представьте ситуацию: вы приходите устраиваться девопсом в 2025 году, а вам дают инфраструктуру времен, когда Docker только-только набирал популярность.

Наш герой не растерялся, вспомнил, как деды воевали с контейнерами:
web:
links:
- db:mysql
db:
image: mysql:5.7

И знаете что? ЗАРАБОТАЛО. Потому что когда знаешь историю инструментов — выкрутишься из любой ситуации.
Но тут встает вопрос: ЧТО ЭТО ВООБЩЕ БЫЛО?

Варианты:
1. В компании реально такой стек (бегит, ажуматся, но не работать)
2. Это проверка на стрессоустойчивость (пиздец)
3. Перепутал тестовое 10-летней давности (бывает)
4. Проверяют, сможет ли кандидат работать с легаси (умно, но умнее видали, как говорится)

P.S. Офферовед всё сделал и отправил. Ждем ответа. Если примут или не примут — будет о чем рассказать на следующих собесах в качестве кейса)
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥40❤17😁4🤯4👍2
📱 На ютубе новый ролик!
Рассказали про Git
Please open Telegram to view this post
VIEW IN TELEGRAM
❤12🔥8👍4😍1
Важное из ролика.
Пока разработчики следуют GitFlow, создают feature-ветки и ждут апрувов, мы действуем иначе.

Часто мы работаем напрямую с master(main)-веткой. Хотя вернее сказать, что напрямую с релизной веткой (тут всё зависит от конкретной реализации флоу).

Какие могут быть задачи:
— деплой релиза (разрабы собрали определенные фичи и баг-фиксы и тд)
— настройка инфраструктуры (тот же ансибл)
— правка пайплайнов
— обновление конфигов
— исправление деплоя на проде

Пример: решили изменить конфигурации (например новые политики безопасности), причем решили это на уровне выше — условно архитекторы и безопасники (или лиды, а иногда и вы сами, обсудив с командой). Инфраструктура тоже готова. Надо просто внести изменения в конфиги того же деплоя и задеплоить. ОНИ УЖЕ СОГЛАСОВАНЫ. Никакие фича ветки тут не нужны. Самому себе апрувать мерж-реквест тоже смысла нет.

Алгоритм может отличаться:
1. создаётся релизная ветка, там вносятся изменения, деплоятся на нужные стенды
2. Коммит в мастер (не очень хороший флоу)

А дальше смотрим — ок или не ок (знали бы вы сколько коммитов с комментом "fix" плодят девопсы…)))). Если что-то не так — правим в самой релизной ветке и редеплоим до победного, если никак ничего не помогает — откатываем релиз, деплоим предыдущую версию, идём разбираться.

А когда прод болеет, времени на создание feature-веток, аппрувов и pull request'ов просто нет. Исправляем и релизим.

Из-за этого мы часто используем веб-IDE. Смысл клонировать репу локально, если надо поправить пару строк, сразу раздеплоить и протестить? А в вебе как раз можно быстро отредактировать нужный файлик, закомимитить в нужную ветку (хоть мастер, хоть дев, хоть релиз) и задеплоить.

Тем не менее, вот минимальный набор команд выживания:
git clone <url>          # Клонируем репозиторий
git pull origin main # Подтягиваем изменения
git add . # Добавляем все файлы
git commit -m "текст" # Коммитим с сообщением
git push origin main # Пушим в мастер


Но вообще у нас полный расколбас:
— прямые коммиты в мастер
— частая работа в web-IDE
— любой коммит может запустить деплой

А самое веселое:
— ревью нет
— ошибка в мастере может уронить весь сервис

Справедливости ради, всегда можно откатиться 🦽 (кстати способы есть разные, об этом скоро будет отдельный пост)

Всем хорошей субботы 🤝
👍25😍12❤5🤩3🔥2
👀 Это что, курс по куберу??

Да, выпустили курс по KUBERNETES на степике
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥22❤3🤯2👍1
📱Эта неделя богата на контент!

Вчера на ютубе вышел ролик о том, как мы "Алексея" в девопс устраивали.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍12❤6😍2
Друзья!
Сегодня мы отмечаем 10.000 уникальных пользователей на наших курсах!

Благодарим вас за поддержку, дальше — больше!

В этом посте прилагаем ссылки на все наши курсы, пост будем дополнять с выходом новых.

🆓DevOps простым языком
🆓Права и пользователи в Linux
💵Kubernetes простым языком
💵Docker простым языком
💵
Linux простым языком
💵
Git простым языком
💵Программа DevOps: Фундамент
🔥40👍6😍3
Новый модуль!

Сегодня в курсе по линуксу вышел новый модуль (уже 11й) — Логирование и мониторинг.

Решили поэкспериментировать и немного изменили формат уроков.

Рассказываем про rsyslog, journald, journalctl, поиск, хранение и ротацию логов, разные утилиты мониторинга и как интерпретировать их вывод.
Без практики, разумеется, не обошлось.
🔥30❤8👍6🤯1🤡1
"Вопрос с собеседования"

Как kubernetes (scheduler) резервирует ресурсы или почему нельзя бездумно рисовать минимум и максимум?

Управление ресурсами нужно по понятным причинам:
— Предотвратить истощение, когда один под может сожрать все ресурсы кластера.
— Оптимизировать этот самый кластер.
— Обеспечить стабильность.
— Экономить ресурсы и деньги.

Вообще в кубере много разных типов ресурсов, но нам сейчас интересны только самые популярные: cpu и ram.

cpu — измеряются либо в millicores (m), либо в ядрах. 1000m = 1 CPU ядро.
Пример с ядрами:
    resources:
requests:
cpu: "1" # 1 ядро CPU
limits:
cpu: "2" # 2 ядра CPU

Пример с милискорами:
    resources:
requests:
cpu: "500m" # 500 милискоров CPU, или 0.5 ядра
limits:
cpu: "1500m" # 1500 милискоров CPU, или 1.5 ядра

CPU является compressible ресурсом — при превышении лимитов контейнер будет троттлить, но не будет убит.

Память — измеряется в байтах (Ki, Mi, Gi) и является incompressible ресурсом — при превышении лимита контейнер будет убит OOM killer'ом.

Теперь переходим к самому главному, зачем мы тут собрались. За выделение ресурсов отвечает scheduler, у него есть специальный алгоритм, если интересно подробнее про это всё — ставьте 🧐 — напишем пост, а пока...

Для чего было это введение:
У подов (соответственно и у Deployment, StatefulSet, DaemonSet, ReplicaSet) есть параметры: requests и limits.
requests определяет минимальные ресурсы, которые будут выделены поду.
limits определяет максимальные ресурсы, которые под может использовать.

Чтобы развернуть под, scheduler сначала выделяет ему ресурсы и только потом деплоит. Если ресурсов не хватает — под не запускается. Ресурсы выделяются и резервируются на основе request'ов. Только так и никак иначе. И вообще так должно быть везде.

Но! Это можно изменить (хз зачем, но можно, что у нас и сделали): написать кастомные контроллеры или залезть в scheduler и поменять его логику. Из-за этого на работе мы столкнулись с проблемой.

Сделали так, что кубер выделяет ресурсы подам по лимитам. В итоге что видим: зарезервировано 300 cpu из 300, а реальное использование — 6.

В итоге: бесшовное обновление подов невозможно, так как негде взять процы на новый, не убив старый. Выбираем из двух зол: либо недоступность сервисов во время обновления, либо невозможность обновлений.

Реальное использование — 6, ШЕСТЬ. Почему так? Потому что рисовали лимиты на абум. Что теперь делать? — Смотреть реальное потребление каждого сервиса и менять им значения лимитов. При этом первые несколько штук придется обновлять жестко, сначала убивая старые поды, и потихоньку, со временем (несколько месяцев), удастся привести кластер в нормальное состояние.
Please open Telegram to view this post
VIEW IN TELEGRAM
68❤9🔥5👍3👏1
F.A.Q. Интенсив.

— Не слишком ли мало недели для интенсива?
DevOps за 7 дней — условное название, потому что материал разбит на 7 смысловых блоков. Лайв-поддержка и проверка домашек будет на протяжении месяца со старта интенсива. Материалы остаются навсегда.

— Сколько в день нужно уделять?
Кто сколько сможет. В течение месяца, думаем, справиться каждый, а при большом количестве ежедневных часов — можно и в неделю уложиться.

— Как будут реализованы общие созвоны, учитывая что часовые пояса могут сильно отличаться?
Во-первых, записи всех созвонов останутся доступны навсегда. Во-вторых, либо будем стараться подобрать удобное всем время, либо будем дублировать созвоны так, чтобы было удобно людям из разных часовых поясов.

— Какой уровень подготовки нужен?

Как и на наших курсах, стараемся сделать так, чтобы с любым уровнем знаний было легко втянуться.

— Когда начало интенсива?

Первый поток планируется в начале августа. Анонс с точной датой и записью на интенсив появится заранее.

— Будут ли отличаться материалы от курсов на
Stepik?
Да, курсы — изучение фундаментальных и продвинутых вещей в конкретном инструменте, а интенсив — это быстрое погружение в девопс: как инструменты работают в связке.

— Хотелось бы не просто узнать десятки инструментов, а связать их в единую систему, что бы в дальнейшем над этим работать

Именно так и построен интенсив, мы пошагово будем девопсивизировать проект, добавляя разные инструменты. Будет отдельная практика по каждому инструменту + общая работа над проектом, где используются все инструменты вместе.

— Какие способы оплаты есть?

Оплатить можно картой, СБП, "Долями".

Позже выложим пост, где подробно распишем, как будет проходить интенсив: формат, задания, теория, практика и общая структура.
💯16❤10👍9🔥3👏1