Просто Devops
27.6K subscribers
117 photos
4 videos
10 files
160 links
Платформа: https://prostodevops.ru/l/kanal
Отзывы: https://t.me/prosto_devops_reviews

Менеджер - @devmoder
Матвей - @greghouse134
Миша - @misha_devops
Ютуб - youtube.com/@prosto_devops

Бот - @prostodevops_bot
Download Telegram
Модель OSI. Несетевиковый пост.

Этот пост разбит на две части: в первой - фактура, что к чему, почему о ней говорят на собесах, во второй - фан-факты, история и всё то, что никто не учит, но нам кажется интересным.

Часть 1.

Модель OSI — это концептуальная структура, у которой, как всем известно, 7 уровней:

1. Физический уровень — физическое соединение между устройствами, преобразование данных в битовый поток.
2. Канальный уровень — передача данных между устройствами в одной сети.
3. Сетевой уровень — маршрутизация и передача данных между разными сетями.
4. Транспортный уровень — сквозная связь между устройствами, управление потоком данных и контроль ошибок.
5. Сеансовый уровень — управление сеансами связи между устройствами, синхронизация передачи данных.
6. Уровень представления — преобразование, шифрование и сжатие данных.
7. Прикладной уровень — взаимодействует с пользовательскими приложениями, типа браузеров.

Но это вы и так знаете, как знаете и то, что модель так и осталась теоретической, а мир живёт на TCP/IP.

А почему тогда о ней так много и часто говорят?
Потому что она ценна тем, что все, ну или почти все сетевые технологии и протоколы можно сопоставить с ее уровнями. Это помогает понять их функции и взаимодействие в общей сетевой архитектуре. Взять тот же TCP/IP - его сопостовляют с уровнями OSI, чтобы описывать и понимать было удобнее и проще.

ЭТАЛОННАЯ МОДЕЛЬ - идеальное описание, не просто так появилось.

Почему об OSI так любят спрашивать на собесах?


Потому что понимание этой модели — фундаментальная часть большинства сертификаций по сетям. Знание модели OSI = понимание основ сетей. Потому что сами не знают что спросить, а этот вопрос гуглится по первой ссылке "вопросы для собеседования devops".

Короче, это БАЗА. Это знать надо.

Еще часто любят спрашивать о том, на каком уровне модели OSI работает тот или иной протокол: DHCP, DNS, ICMP, UDP и так далее.
Это кстати относится и к вопросу о том, что сетевые технологии описывают через OSI, чтобы все друг друга сразу понимали.

Часть 2.

Разработка модели OSI началась в конце 1970-х годов.

А вот тут внимательно:
Начались два проекта по разработке стандартов сетей:
— один проект вела Международная организация по стандартизации — ISO
— второй — международный консультативный комитет по телеграфии и телефонии — CCITT

В мае 1983 года документы CCITT и ISO были объединены, образовав "Базовую эталонную модель для взаимодействия открытых систем", как раз таки нашу всем известную модель OSI.
Она была опубликована в 1984 году как стандарт ISO 7498 и стандарт X.200 переименованного CCITT (ныне ITU-T).

А 1 января 1983го, то есть почти за полгода до того, как выкатили OSI, ARPANET — весь интернет в мире в то время — полностью переехал на TCP/IP, кстати вместе с этим ARPANET переименовали в Internet.
👍34❤12🔥4😍3😱2
Модель TCP/IP. Часть 1.

Модель TCP/IP — это практическая структура, у которой 4 уровня:

Уровень сетевого доступа (Network Access Layer) — физическое соединение и передача данных между устройствами в одной сети. (1й и 2й уровни OSI)

Интернет-уровень (Internet Layer) — адресация и маршрутизация пакетов между разными сетями через IP. (3й уровень OSI)

Транспортный уровень (Transport Layer) — надежная передача данных между устройствами, управление потоком и контроль ошибок через TCP. (4й уровень OSI)

Прикладной уровень (Application Layer) — взаимодействие с пользовательскими приложениями и сервисами. (5й, 6й и 7й уровни OSI)

А почему TCP/IP так прижился?
Потому что он независим от оборудования и программного обеспечения. Протоколы стандартизированы и работают в любом контексте, независимо от операционной системы или устройства. TCP/IP также высокомасштабируем и как маршрутизируемый протокол может определять наиболее эффективный путь через сеть.

На собесах любят спрашивать, как работают конкретные протоколы в стеке TCP/IP: HTTP, FTP, SMTP, DNS и как они взаимодействуют между собой на разных уровнях модели.

История.
Разработка TCP/IP началась в начале 1970-х годов.

В мае 1974 года Винт Серф и Боб Кан описали межсетевой протокол для совместного использования ресурсов с помощью коммутации пакетов между узлами сети. Они работали с Жераром Ле Ланном, чтобы включить концепции из французского проекта CYCLADES в новую сеть.

Первоначально TCP был монолитным протоколом, который пытался делать слишком много. В 1977 году Джон Постел (один из важнейших пионеров интернета) опубликовал комментарии о состоянии TCP, где отметил: "Мы облажались в нашем дизайне интернет-протоколов, нарушая принцип многоуровневости".

Это привело к разделению TCP на два отдельных протокола: TCP на транспортном уровне и IP на сетевом уровне, отсюда и название TCP/IP. Первые формальные стандарты для версий IP и TCP, используемых в современных сетях (версия 4), были созданы в 1980 году.

А 1 января 1983 года ARPANET полностью перешла на TCP/IP, и это стало официальным рождением интернета, каким мы его знаем сегодня.

Забавный факт: TCP/IP настолько универсален, что, как шутят, может работать "на двух консервных банках и веревке". А в 1999 году в качестве шутки была создана формальная спецификация протокола IP over Avian Carriers (IP через птиц-носителей), которая была успешно протестирована два года спустя.

В 2004 году Винт Серф и Боб Кан получили премию Тьюринга за свою работу над TCP/IP.
👍33🔥5❤4🤯1
Модель TCP/IP. Часть 2.

Как взаимосвязаны уровни TCP/IP? (От 4го к 1му)
— Уровень приложения — вы решаете, что отправить: веб-страница, файл, email и так далее.
— Транспортный уровень — содержимое пакуется, выбирается протокол: TCP или UDP.
— Интернет-уровень — указываются IP-адреса получателя и отправителя.
— Уровень сетевого доступа — определяется способ доставки: wifi/ethernet.

Один из главных механизмов в контексте TCP/IP — порты.
Порты - это числовые идентификаторы, используемые для определения конкретных приложений или служб на устройстве. Они позволяют нескольким приложениям одновременно использовать сетевые ресурсы на одном устройстве.

Основные протоколы и их порты
— HTTP (порт 80) — протокол передачи гипертекста для веб-страниц.
— HTTPS (порт 443) — защищенная версия HTTP.
— FTP (порты 20 и 21) — протокол передачи файлов.
— SSH (порт 22) — протокол безопасного удаленного доступа.
— SMTP (порт 25: ) — протокол отправки электронной почты.
— DNS (порт 53) — система доменных имен для преобразования доменов в IP-адреса.
— DHCP (порты 67 и 68) — протокол для автоматического назначения IP-адресов.

Особнячок ICMP.
ICMP не использует порты, так как он работает на уровень ниже, чем TCP или UDP — на 3м (сетевом) уровне OSI. Вместо портов ICMP использует типы и коды сообщений для идентификации различных операций. Например, тип 8 — это эхо-запрос (ping), а тип 0 — эхо-ответ.

Что нужно знать девопсу о сетях?
— распределение нагрузки между серверами для повышения производительности.
— настройка и управление виртуальными частными сетями.
— мониторинг сети
— понимание принципов работы сетей в контейнерных средах:
Docker и k8s.
Плюс:
— понимать структуру IP-адресов и принципы создания подсетей.
— понимать сетевую безопасность. (межсетевые экраны)


Надо ли всё это заучивать для устройства на работу? Надо ли всё это знать чтобы работать? — Нет и нет.
Если будут требоваться конкретно на вашей работе — не сложно выучить на ходу.
В любом случае, знать всё — нереально, поэтому лучше сконцентрироваться на более важных инструментах: кубере, докере, ансибле, ci/cd-инструментах, а сети можно знать поверхностно.
👍29🔥8❤5
В этом посте хочется поговорить о сетевых протоколах, точнее о конкретном протоколе — IPoAC.

Сегодня, кстати, ему исполнилось ровно 35 лет.
IPoAC расшифровывается как IP over Avian Carriers — передача данных через птиц-носителей. Он описан в RFC 1149, а опубликован 1 апреля 1990 года.

Принцип работы:
1. IP-пакеты записываются на физический носитель, например — бумагу, который прикрепляется к ногам почтовых голубей. По сути данные инкапсулируются.
2. Птицы доставляют эти пакеты к пункту назначения.
3. На месте прибытия данные считываются с помощью оптического распознавания символов — OCR, считайте сканером, и передаются в сеть.

В 2001 году в Норвегии успешно протестировали CPIP (Carrier Pigeon Internet Protocol) - конкретную реализацию IPoAC.
Сетевики отправили девять пакетов данных. Из них только четыре пакета были успешно получены, а команда сделала такие выводы:
— Протокол имеет 55%-ную потерею пакетов.
— Среднее время ответа варьировалось от 50 до 100 минут.

Особенности и ограничения:
— Время передачи данных через голубей значительно превышает современные сетевые технологии.
— Ограничения на объем передаваемой информации делают этот метод непрактичным для больших объемов данных.
— Потери данных могут быть значительными из-за внешних факторов, таких как ошибки оператора или побег птиц.

Но несмотря на не самые лучшие показатели протокола, его продолжают поддерживать:
— В 1999 году добавили поддержку качества обслуживания - QoS (RFC 2549)
— А в 2011 году протокол адаптировали для IPv6 (RFC 6214)

Кстати QoS тоже интересно реализован в контексте IPoAC:

При передаче данных через голубей можно учитывать приоритеты пакетов. Например, пакеты с высоким приоритетом доставляются быстрее за счёт использования более быстрых или надёжных птиц.

Имейте в виду, что хоть IPoAC хорошо демонстрирует возможности нестандартных решений, он не предназначен для серьезного использования.
😁53❤4👍4😱1
Дорогие друзья, мы знаем, что у многих, особенно у новичков часто возникают вопросы, которые они могут постесняться задать, так как их сочтут глупыми/очевидными или ещё какими-нибудь — сами через такое проходили.

Но когда мы учимся — важно задавать вопросы, чтобы прогресс шел быстрее. К тому же, часто бывает так, что один и тот же вопрос возникает у многих людей, но они все не решаются его задать..

Так вот для решения этой проблемы мы решили сделать Телеграм-БОТа, в который вы можете прислать анонимный вопрос, а мы ответим на него в канале.

Так же в бот можно присылать интересные истории и кейсы из личной практики, которыми вы хотели бы поделиться с сообществом.

А вот и сам бот — @prostodevopsQ_bot
👍22❤5😍2🤯1
Друзья, мы не ожидали такого ажиотажа — просто завалили нас вопросами 🔥

Будем отвечать на каждый по мере возможности, а для начала решили выбрать тот, что прикрепили к посту.

Мы уже касались этой темы в этом и этом постах.

Давайте пойдем по порядку:
как понять, что тебе допустим хватит на джуна знания линукс, docker и т.д, как не сидеть на одной технлогии и идти дальше?))
На самом деле тут два вопроса:
— Что надо знать, чтобы пройти собес?
— Что надо уметь, чтобы справляться на работе?

На собесе, даже на джуна, могут поверхностно затронуть любую тему — хоть kubernetes, хоть БД, хоть что-то из python, не говоря об основных темах типа Docker или Linux.

Значит ли это, что нужно досконально выучить SQL, чтобы ответить на тот самый вопрос по базам? — Нет, это значит, что на каком-то одном собеседовании из всех вы столкнетесь с вопросом, которого не ожидали.

Как готовиться к собесу?
— гуглить "вопросы для собеседования девопс" — читать, изучать. Но там есть проблема — вопросы никак не структурированы, а значит есть вероятность углубиться в лишнее и не коснуться нужного.

А чтобы сформировать примерное понимание, какие вопросы задают, а какие нет — надо смотреть записи собеседований (кстати скоро мы представим вам наше обновленное закрытое сообщество, где этого будет навалом — можете считать это анонсом).
Плюс в оценке своих сил лучше всего помогают Mock-собеседования — это имитация реального собеседования, где вам задают вопросы, вы отвечаете, всё как в реальном мире, а после получаете обратную связь — что стоит подучить, а где наоборот знания очень хорошие.

Ну а дальше уже можно идти на реальные собеседования и набивать опыт — уже после 3-4 собесов, если будете исправлять ошибки и закрывать белые пятна, почувствуете огромный прогресс.

Как самостоятельно понять, готовы ли к мокам и собесам?
— Представьте, что объясняете другу, как работает та или иная технология.
Возьмем для примера докер: можете объяснить что это, зачем надо, как работает, рассказать про основные команды, что они делают, как выполнить разные задачи (необязательно сложные), рассказать про докер-компоуз — значит у вас достаточно знаний, чтобы идти на собесы.
Может эти знания не очень структурированы, может каких-то знаний не хватает, а может и хватает — это останется неизвестным, пока вы не пойдете по собесам.

Только через практику можно прийти к результату, а учиться и готовиться можно бесконечно долго, только вот в конце концов это окажется не эффективным.

Что надо уметь, чтобы справляться на работе?
— Пока не начнете работать не узнаете. Задачи, а следовательно и навыки варьируются от места к месту очень сильно.
Базой, то есть: chat-gpt, докер, линукс надо владеть, а остальные технологии могут отличаться, причем с какими-то вы можете вообще ни разу не столкнуться напрямую, условно с тем же кубером.

Если взять все существующие депопсные технологии и посчитать время, которое надо, чтобы каждой овладеть — жизни не хватит. К тому же, в абсолютно любом случае что-то надо будет учить или доучивать на ходу.

Поэтому здесь даже проще — когда вы устроитесь на работу, вы:
а) будете знать, что вам надо уметь
б) сможете освоить сразу на практике

Едем дальше:
просто есть такой трабл, что пока все знания не всосешь, тяжело идти дальше, чувствуешь что не знаешь ответы на вопросы

Частично про это уже сказали. Выучить всё — невозможно. Возможно — оценить свою готовность: записи собесов и пометочки "ответил бы / не ответил бы", а как кульминация — мок-собесы. Дальше только практика, практика, практика, то есть реальные собесы.

И вообще это чувство, что "тяжело идти дальше" возникает потому, что вы предвкушаете стресс — не надо, собес — это не экзамен, а работа тем более. К тому же собесов у вас будет куча, а значит рано или поздно пройдете, ещё смеяться потом будете, как всё легко оказалось.

Такой вот небольшой ответик получился)

Кстати, мы думаем проводить mock-собесы. Поставьте 🤩 под этим постом, если вы хотите появления такой опции.
Please open Telegram to view this post
VIEW IN TELEGRAM
🤩117👍17❤10🔥1
Сегодня у нас простой вопрос.

ЯПы ДЕВОПСУ НЕ НУЖНЫ.

Ну ладно, скажем так — надо уметь читать код. Углубляться в какие-то библиотеки, продвинутую прогу — незачем.
Поэтому достаточно знать синтаксис какого-нибудь питона и уметь на нём писать простые скрипты.

И то, в работе вам чат-гпт напишет любой скрипт, надо только объяснить ему, что от этого скрипта требуется, а потом проверить, что он отрабатывает корректно, если что — поправить.

Поэтому — синтаксис, чтобы уметь прочитать, и понимание логики, чтобы понимать, что требуется сделать.

Главное, что надо понять: даже если вам поручат написать какой-то скрипт — это будет что-то примитивное.

Поэтому не парьтесь с ЯПами.
Оставьте код разработчикам, мы занимаемся другим.

Что касается "как понять хватает ли навыков" — если это тоже насчет ЯПов — вот даже если вы вообще ничего не знаете — этого в целом хватает.
Если этот вопрос про навыки в целом — как раз последний пост был про это
👍37🔥11❤6
Понедельник — сложный день, опять работа, опять вот это всё..

А мы решили вас порадовать новым роликом, на этот раз поговорили про ИБ.

Смотрим:
https://www.youtube.com/watch?v=wgvQ6eJlbXw

P.S. Как вам новый монтаж и превью?
🔥13❤8👍3😍1
Как лучше входить в девопс?

Рассмотрим оба подхода (см. вопросы на скриншотах) с разных сторон.

1. Простота освоения.
Через системное администрирование/разработку:
— Это проще для новичков, так как можно постепенно освоить базовые навыки, необходимые для DevOps.
— Сисадминство дает понимание инфры, работы серверов, сетей и ОСей — тоже основа для девопс.
— Разработка помогает освоить работу с системами контроля версий (Git) и познакомиться с CI/CD (если говорить про разработку в больших командах/проектах).

Напрямую в DevOps:
— Путь сложнее, особенно для новичков без опыта в IT. Потому что девопсу нужны широкие знания: Linux, Docker, Ansible, CI/CD (Gitlab/Jenkins). А плюсом — k8s, terraform, но тут новичкам хватит базового представления.

2. Деньги.
Через системное администрирование/разработку:
— Зарплаты джунов сисадминов (что это вообще за позиция?😁) или джунов разрабов ниже, чем у джунов девопсов.

Напрямую в DevOps:
— Быстрее будете получать нормальную ЗП. Даже джуны девопсы могут получать столько, сколько мидлы в других IT-сферах.

3. Карьерный трек.
Через системное администрирование/разработку:
— Простой и "классический" путь в девопс

Напрямую в DevOps:
— Рынок DevOps активно растет. Спрос на спецов высокий. Денег платят больше, чем остальным.
— Конкуренция среди джунов огромная. (По крайней мере это выглядит так, на деле всё немного сложнее - откликов на джуновские позиции действительно очень много, но среди них достойных кандидатов - минимум, по этой теме есть очень много исследований от разных авторов)
— Наиболее простой успешный старт будет через стажировку.

4. Как попасть сразу в DevOps на хорошее место.
— Стажировка в крупной компании — безопасно, всё покажут, ничего не требуют. Можно остаться дальше джуном с нормальной ЗП.
— Крутануть опыт и идти по собесам. Опаснее, так как при устройстве уже будут ожидать какие-то умения. Но сразу хорошая ЗП, не нужно заниматься чем-то отстранённым перед тем, как попасть наконец-то в девопс. Но накрутка — наука тонкая, есть разные подводные камни и сложности.

Дополнительно:
— Точно не рекомендуем идти через разработку, так как там надо учить много того, что, скажем так, не нужно девопсу.
— Самые простые позиции для старта и дальнейшего перехода в девопс: тех. поддержка, сис. админство, дежурная смена.
— Накрутка опыта — эффективный способ выиграть в гонке за вакансию у других кандидатов. Но тема сложная.

Поэтому если у вас есть время, и вы хотите спокойно вливаться в ремесло — стажировки и подобные начальные ступени — лучший выбор.

Понятно, что таких мест не так много, поэтому следующий простой вариант — сис. админить или тех. поддерживать, а оттуда перекатываться в девопсы.

Если хотите сразу в девопс, готовы на ходу разбираться, не пугают потенциальные бессонные ночи из-за того, что чего-то не знаете и приходиться закапываться в гугл — можете крутить опыт (но если выбрали этот путь — лучше обратитесь к тем, кто помогает с накруткой, так вы сэкономите и время, и силы, и нервы)

Что касается "бэкграуда админа" — нигде в определении DevOps нет "эволюционировал из сис. админа".
Просто всем нужен опыт работы. У большинства работодателей нет времени и денег на обучение сотрудников для себя. А тех, у кого есть — вы прекрасно знаете: все стажировки и школы яндекса, сбера, озона и так далее.
🔥26👍7❤6🤯1🤩1
Начнем с того, что про докер у нас есть видео на ютубе.

Говорить о том, что докер — это платформа контейнеризации уже становится неудобно).

Давайте кратенько о том, как он устроен:

Docker использует клиент-серверную архитектуру.
— Есть клиент — Docker CLI — командная строка, где мы отдаём команды докеру.
— Есть демон (Docker Daemon) — серверная часть, которая выполняет эти команды.
— Есть API, по которому клиент общается с демоном.

Контейнеры.
— Контейнеры работают на общем ядре хоста. Но изолированы друг от друга и от хоста благодаря механизмам ядра Linux (namespaces и cgroups).

Компоненты Docker.
— Образ (Docker Image) — шаблон для создания контейнера. Содержит всё для запуска (код, библиотеки и тд).
— Контейнер (Docker Container) — изолированное окружение, созданное на основе образа.
— Регистри (Docker Registry) — хранилище образов, например, Docker Hub.
— Dockerfile — текстовый файл с инструкциями для сборки образа.
— Сети и тома.

Ещё.
— Есть условный docker compose, чтобы управлять сразу некоторым количеством контейнеров.
— Есть docker swarm — оркестратор. Считайте кубер на минималках.

Для тех, кому интересно, что за namespaces и cgroups:
Неймспейсы создают изолированные пространства для процессов, чтобы они не видели ресурсы других процессов, вот некоторые из них:
— PID namespace — изолирует id процессов
— Network namespace — изолирует сеть
— Mount namespace — изолирует файловые системы
— User namespace — изолирует пользователей и группы

Cgroups (Control Groups) управляют использованием ресурсов:
— Ограничивают доступ к CPU, памяти, диску и сети.
То есть можно задавать приоритеты или лимиты, например: можно ограничить контейнер на 256мб памяти или 20% процессорного времени.
👍22❤6🤩4😍2
Друзья! Мы запускаем закрытое сообщество СЛОЖНО DEVOPS

В комментариях к нашим постам и на просмотрах интернета постоянно всплывают вопросы:
— Как учиться?
— С чего начать?
— Где начинается и заканчивается БАЗА того или иного инструмента?
— Что надо знать 100%, что надо иметь в виду, а изучение чего можно отложить?
— Где искать практические задания?
А также:
— Как составить резюме?
— Как вести переговоры об оффере?
— Какие нюансы технологий и работы с ними надо учитывать?
— Как устроены процессы в компании?

И это лишь МАЛАЯ ЧАСТЬ.

Информации очень много, а найти ответ — настоящее испытание.

Именно поэтому мы решили собрать всё это и даже больше.

🧠 Уже сейчас внутри сообщества вас ждут:

— Лекции, полезные видео и материалы по всему девоПСУ
— Гайды и практики по Linux, docker, k8s, ansible, ci/cd, git, etc... (готов подробный контент план на 30 видео вперед)
— Разборы вакансий для всех грейдов
— Практические видео с разбором конкретных рабочих кейсов

🔨 Объемные практические задачи для любого уровня знаний
— Сможете потестить свои навыки на задачах + если отправите отчет, то мы его проверим и дадим фидбэк
— Видео и практики по Linux уже ожидают просмотра и выполнения✅

Когда речь заходит о трудоустройстве — мы постоянно говорим о том, что надо смотреть записи собесов, чтобы понимать, на что рассчитывать и к чему готовиться. Так вот в сообществе вас уже ждут:

😏 Реальные собеседования DevOps (сейчас уже 🔞 штук, будем постоянно дополнять собесами ребят, с кем работаем по трудоустройству)

🧐 Гайды, статьи, etc...

😐 Сообщество
— Ответим на любые вопросы, которые у вас могут возникнуть
— Первыми сможете получить доступ к новым продуктам
— Сможете влиять на контент, так как мы прислушиваемся к своим драгоценным подписчикам

Особенно рекомендуем посмотреть наш разбор gitflow — познакомиться с процессами разработки и узнать, что везде используется, но не часто вспоминается в интернете, когда речь идет о том, что надо знать.

А завтра в сообществе выйдет подкаст о том, как относиться к первому офферу, и почему не стоит сразу его принимать.

UPD: сообщество более не активно
Please open Telegram to view this post
VIEW IN TELEGRAM
🤡23🔥10👍5❤1🤩1
❔ КАК ХРАНИТЬ СЕКРЕТЫ В ДОКЕРЕ?

Хранить токен прямо в Docker-образе
— на самом деле нормальный подход, очень удобно.

Что может произойти с образом?
Его легко слить, сломать, украсть или ты сам можешь случайно выложить его в репу, а там тоже привет утечка и минус бот.

Поэтому:
❌ Хранить токен прямо в Docker-образе — это конечно же полная ху#ня и так делать не надо,

✅ КАК ДЕЛАТЬ ПРАВИЛЬНО?

1️⃣ Переменные окружения (environment variables)
Супер простой, супер базовый способ.

Добавляем такую штуку в докерфайл:
ENV BOT_TOKEN your_token_here


Потом просто запускаем контейнер с внешним токеном:
docker run -e BOT_TOKEN='наш токен' botname


НО! Осторожно — не светим токен в репах. Иначе толку от того, что мы это всё сделали?
Для этого используем .env файлы и сразу добавляем их в .gitignore.
docker run --env-file=.env my_awesome_bot


2️⃣ Docker secrets
Это продвинутый типа способ, но конечно для бота — перебор.
Но вообще рассмотрим, так как это что-то, что можно встретить в реальной жизни:

Docker Secrets работают только в режиме Docker Swarm. Чтобы его активировать:
docker swarm init

Эта команда переводит Docker в режим оркестрации.

Создание секрета
После активации Swarm можно создать секрет. Например, чтобы сохранить токен бота:
echo "ваш_токен" | docker secret create bot_token -


Проверить список созданных секретов можно командой:
docker secret ls


Настройка Docker Compose
Теперь нужно настроить docker-compose.yml, чтобы контейнер мог использовать созданный секрет:
version: '3.7'

services:
my_bot:
image: bot_image # имя образа бота
secrets:
- bot_token # секрет, который будет доступен контейнеру

secrets:
bot_token:
external: true # Говорим Docker, что секрет уже создан и находится вне этого файла


Запуск контейнера
Запустите контейнер с помощью команды:
docker stack deploy -c docker-compose.yml my_stack


— my_stack — имя стека (можно выбрать любое).
— Эта команда развернёт сервис и подключит секрет к контейнеру.

Доступ к секрету внутри контейнера
Секреты становятся доступными внутри контейнера в виде файлов в каталоге /run/secrets. Например, чтобы прочитать токен, ваш бот может использовать путь /run/secrets/bot_token.

Например, если бот написан на питоне, то получить токен можно примерно так:
with open('/run/secrets/bot_token', 'r') as f:
bot_token = f.read().strip()


Только те контейнеры, которым явно предоставлен доступ к секрету могут его использовать.

ИТАК, ЧТО ПОНЯТЬ ПРЯМО СЕЙЧАС:

— Никогда не храните токены в коде.
— Всегда используй переменные окружения или Docker secrets.

Учите докер, господа, чтобы жизнь была проще.

🤖Всем безопасных ботов
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥29👍8❤3🤯3😁1
Все же слышали про LA?

Речь не про город, а про метрику в Линукс.

Если посмотрите в интернетике - вам скажут, что load average отражает количество процессов, которые выполняются за 1, 5 и 15 минут.
Это утверждение слишком размытое, а мы внесём ясность.

Кстати, спасибо Брендану Греггу, который прочитал тридцать тысяч коммитов, чтобы разобраться в la и поделился всем с миром.

la сначала действительно обозначал среднюю нагрузку на процессор, а с 93го года отражает нагрузку на систему в целом.

Как?
Очень просто: к загрузке процессора ещё добавились процессы в очереди.⬇️
load average учитывает процессы в статусах running и nr_uninterruptible (ещё uninterruptible sleep или TASK_UNINTERRUPTIBLE), а в выводе команды top — это процессы в R и D соответственно.

Ещё раз:
la отображает среднее количество процессов, которые выполняются или ожидают выполнение каждые 5 секунд в течение 1, 5 и 15 минут соответственно.

То есть — la показывает не количество всех процессов, которые выполнялись за 1,5,15 мин, а среднее количество процессов в исполнении/ожидании за прошедшее время.

Пример, чтобы было понятнее:
Условно, если первые 30 секунд выполнялось/ожидало суммарно 2 процесса, а за следующие 30 — 6 процессов, то la за минуту будет (2+6)/2 = 4.
А если первые 20 — 2, следующие 20 — 0, а в завершающие 20 — 6, то (2+0+6)/3 = 2.67.

Это самое простое, при этом самое понятное объяснение la, которое должно расставить всё по местам и стать вашем супер-ответом на собесе.

А вообще мы хотим сделать целое видео про la, где уже глубже и с деталями объясним как она работает.

Всем хорошего завершения рабочей недели🤝
👍51🔥11❤4🤯2👎1
🔥 init

Вы ждали, вы просили, сегодня это случилось...

Мы выпустили новый курс! На этот раз по Linux.

Традиционно:
— без воды
— самое нужное
— понятным языком
— максимальный упор на закрепление
— фокус на практику
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥26😁6😱2😍2👍1
Мы начинаем рубрику разборов вопросов с собеседований в DevOps.
Здесь не будет какой-то структуры и порядка, просто берём любой вопрос и разбираем.

Собственно первый вопрос:
— Что такое inode?

Дословно: индексный дескриптор.

Понятнее: структура данных, которая хранит метаданные файлов и обеспечивает управление дисковым пространством*.

Системно: айноды содержат все метаданные о файле, кроме имени и фактического содержимого. Каждый файл имеет свой уникальный inode, который является его идентификатором.

*Управление дисковым пространством:
— inode указывают, где лежат данные файлов
— inode определяют количество файлов, которые могут быть созданы
— inode позволяют хранить данные не в последовательных блоках на дисках, а просто где есть свободное место (см. фрагментация)
— inode позволяют создавать хардлинки

Базово на собесе этого может хватить, но могут начать копать, поэтому едем дальше.

Чуть подробнее о метаданных, че в айнодах вообще лежит (ключевое):
— Права доступа (чтение, запись, выполнение)
— Идентификаторы (UID и GID)
— Размер файла в байтах
— Временные метки (создание, модификация, последний доступ)
— Количество хардлинков
— Указатели на блоки данных

Номера inode уникальны в пределах одной файловой системы, но могут повторяться в разных разделах.

Допустим есть два раздела:
— /dev/sda1 (смонтирован как /home)
— /dev/sda2 (смонтирован как /data)

В каждом разделе своя собственная файловая система и свой набор inode.
— На разделе /dev/sda1 файл /home/user/file1.txt может иметь номер inode 12345.
— На разделе /dev/sda2 файл /data/report.doc тоже может иметь номер inode 12345.

Это разные файлы, потому что они лежат на разных разделах, и их inode - это просто адрес внутри своего раздела.

Посмотреть inode файла можно командой ls -i
Для получения полной информации можно использовать stat

Вот так это выглядит:
$ ls -i prosto_devops.txt
789451 prosto_devops.txt

$ stat prosto_devops.txt
File: prosto_devops.txt
Size: 4096 Blocks: 8 IO Block: 4096 regular file
Device: fd01h/64769d Inode: 789451 Links: 1
Access: 2025-04-28 14:30:00.000000000 +0300
Modify: 2025-04-28 14:30:00.000000000 +0300
Change: 2025-04-28 14:30:00.000000000 +0300


Количество inode задается при форматировании файловой системы параметром -i в mkfs.ext4:
mkfs.ext4 -i 16384 /dev/sdb1  # 1 inode на 16 КБ пространства

В этом примере мы указываем, что на каждые 16 КБ пространства выделяется 1 inode

Ещё с айнодами связаны такие ошибки:
— Ошибка "No space left on device" при наличии свободного места
— Невозможность создания новых файлов
Это происходит из-за того, что закончились номера айнодов, то есть файлу нельзя дать номер.

Поэтому рекомендуемое соотношение пространства к айнодам зависит от ожидаемого размера файлов. Для систем с преобладанием мелких файлов (менее 4 КБ) используют -i 1024

Ну и inode реализованы по-разному в разных файловых системах

Ключевое отличие ext4 от, например, ZFS, Btrfs, XFS в том, что последние позволяют динамически добавлять inode.
Плюс в этих системах есть ещё другие отличия, но это уже не так важно.

Всем успешных собесов!
#собес
🔥47👍12❤8🤯1
— Ты удалил файлы, а место не освободилось. Почему так может быть?

В целом тут ожидают ответ: "закончились айноды". Ну типа мы удалили условно тяжелый файл, освободилась всего одна айнода, а её в этот момент занял кто-то другой — как итог: физически место есть, а выделить его мы не можем.

Но это один из тех вопросов, где можно начать накидывать варианты, таким образом показав, что реально что-то знаете, а не готовились по подборке "самые популярные вопросы".
Ну так а какие тут ещё варианты?

Вот такие:

Открытые файлы.
Процессы держат файлы открытыми даже после удаления этих самых файлов.
Когда вы удаляете файл через rm или файловый менеджер, система удаляет ссылку на файл из каталога, но пока какой-либо процесс держит файл открытым, физическое пространство не освобождается.

Жесткие ссылки.
Мы удалили hardlink.
Когда на файл существует несколько жестких ссылок, удаление одной ниче не делает. Физически файл удаляется только после удаления всех жестких ссылок, указывающих на его inode.

Накидайте в комментах ещё вариантов, почему после удаления файла, место может не освободиться.

#собес
🔥31👍6🤯5❤3😱1