#vacancy #Data #DWH #Java #Scala #Spark #AWS #ETL #DataLake #remote

Вакансия - Senior Data Engineer

Основная цель: сделать качественный масштабируемый банковский продукт с нуля для десятков миллионов пользователей (В2С и В2В)
Стек: Java/Scala, Spark, SQL, AWS (базовое понимание EC2/networking/security), Hadoop, kafka

Задачи:
1. Проектирование и разработка Data Lake, витрин данных в AWS и Databricks, используя в основном Spark
2. Разработка ETL и оркестрация с помощью Airflow и других инструментов
3. Оптимизация [Spark] SQL, представлений Data Mart
4. MLOps: интеграция данных и инструментов, разработка хранилища функций и поддержка жизненного цикла функций и моделей ML: создание, управление версиями, обслуживание и тестирование.

🌐Удаленная работа

Ваши резюме и рекомендации - всегда welcome!
✉️ ana@coolhr.pro
tg @IamAnastasiyaMorozova
@hr_friend