Инжиниринг Данных
23.7K subscribers
2.35K photos
73 videos
194 files
3.4K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Попытался сравнить РФ стэк и западный, чтобы было понятно, что учить в зависимости от ситуации.

https://dataengineer.ru/career/stack-russia-vs-west/

Что добавить, изменить?
❤‍🔥51⚡9🐳2🫡2
Немножко фоток про то чем занимаюсь, когда заскучал делать дата инжиниринг.

Сегодня настроил Nvidia Jetson и подключил к pc серверу с RTX5090.

Задача примерно такая:
1) симуляцию космоса в Unreal Engine
2) спутники летают и коммуницируют, выполняют свою миссию
3) каждый спутник это один физический jetson
4) на PC тренируется модель компьютерного зрения на базе симуляции, inference будет на jetson gpus
5) в качестве тестирования hardware in the loop мы превращаем видео в дата сет и скармливаем 2м jetson, модели должны в реальном времени следовать сценарию bench testing, параллельно двигатель для спутника будет тестироваться в вакуумной камере, цель сделать полноценную автономную систему к 2028
6) это нам дает TRL5 (работающее демо)
7) в 2027 году AI часть отправляется в космос, чтобы получить TRL7+
8) в 2028 AI + Thruster должны уже вместе работать в космосе

Сейчас команда уже 10 человек и партнерство с 2мя канадскими университетами, так же с локальным Nvidia дата центром, который открывается в Ванкувере.
⚡83❤‍🔥13💯5🌚3
Решил добавить серию базовых вещей на Дата Инженеръ. В surfalytics я это называю “just enough”, а на русском будет базовый минимум - SQL, git, Docker, CLI, Python

Первый курс готов: https://dataengineer.ru/practice/sql/

В качестве примера будет готовая БД duckdb, и задачки
❤‍🔥53⚡12
Сегодня был на встрече с VP и Director по сетям и партнерам. Они продают товары в штатах в разные сети и анализируют продажи. Там две мадам, которые уже много лет в этой индустрии. Они были прям мега exciting про Claude и показали свой дашборд, который построили поверх Snowflake.

Там и KPIs, и ключевые insights, business recommendations. Все сами сделали. Результат впечатляет.

Но есть нюанс. Я не мог гарантировать, что все метрики правильные, я даже не знаю как это сделано - какие таблицы, какие джоины и фильтры.

В целом это лучше, чем ничего, у бизнеса готовый инструмент и советы, как сделать лучше. Бери и делай.

Напоминают reels, когда стегаться над ChatGPT - “Привет, у тебя есть час сделать приложение, найти клиентов и заработать миллион. Строй!!”.
😭17⚡3🍌2
Кто в IT платит выше рынка? И какой оффер считается хорошим?

Предлагаем опытным IT-специалистам поделиться мнением о зарплатах и бенефитах в крупных технологических компаниях.

Кто, на ваш взгляд, платит выше рынка?
У кого привлекательнее премии?
Насколько важны ДМС, спорт, питание и другие бонусы при выборе работы?

👉 Поделиться мнением: https://clck.ru/3WNjdq
👨‍💻1
До сих пор не понимаю про зарплаты в Канаде. MasterCard - огромная компания, лидеры в индустрии. Как можно директору Data Engineering предложить 150к Канадских?

Ну если знать, что Канада это страна иммигрантов, и здесь катострофически не хватает хорошей работы, то становится понятней.

Студенты, выпускники MBA (канадский MBA самый бесполезный из всех, которые я знаю, потому что там даже нетворкинга нет, такие же иммигранты сидят, чтобы визу получить и переехать).

Всем нужна “престижная работа” + бенефиты. Поэтому тут торговаться не будут. Абсолютно на любое предложение (даже 80т в год) будет очередь желающих.

Так же у вас появляется еще один сигнал - если директор ДЕ получает 150т, то скорей всего это будет токсичный, обиженный жизнью микроменеджер, который задаст вам жару😍

Так что поиск работы уже превращаются в битву за выживание, где одни машины сражаются с другими - агенты соискателей атакуют агентов работодателей, а сотрудники по обе стороны баррикад ментально выгорают.

Следующий год будет еще интересней!
Please open Telegram to view this post
VIEW IN TELEGRAM
🤷24😭20🌚4❤‍🔥3🤷‍♀1💯1
Ну вот и наступил день, как говорят 4:0 в мою пользу. Жена и друзья сделали открытки к празднику. Группа Ленинград передает атмосферу, что в этом году отмечать-то не буду. А вот последнее видео, это мое любимое, когда решил пригласить друзей в офис Microsoft отметить день рождения. Вообще офис Microsoft был очень гостеприимный много лет, пока служба безопасности не решила по другому, за что меня и уволили. Они просто завидуют, что так не умеют отдыхать на рабочем месте.

PS могу у вас в офисе организовать вечеринку!!! Будет круто, отвечаю!:)

Вообще на видео может показаться, что я дурачусь, но в 40 лет это уже супер способность быть собой и делать, что нравиться, веселиться и развлекать ни смотря ни на что! 🍾
❤‍🔥122⚡30💯17
Чтобы упростить вам жизнь я добавил summary всех глав The Fundamentals of Data Engineering на русском https://dataengineer.ru/book-summaries/engineering/fundamentals-of-data-engineering/

Updated: я обновил ссылку, чтобы была категория книг summary

12 глав - enjoy!
❤‍🔥65⚡14🐳2
Добавил конспект лучшей книги по созданию продукта.

Сейчас это особенно актуально, ведь от вас ждут не кода, а взаимодействия с бизнесом, понимание продукта и помощи с его измерением и развитием.

В этой книге можете подхватить классных идей для hiring manager, да и вообще посмотреть на аналитическую работу через призму потребностей бизнеса.

https://dataengineer.ru/book-summaries/business/escaping-the-build-trap/
❤‍🔥48⚡4🫡2🦄1