#работа #удаленнаяработа #вакансия #Dataengineer #Дата_инженер #middle #инженер #DA

Позиция: Data-инженер
Полная занятость
График: 5/2
Формат работы: удалённо
Компания: 7RedLines
Оформление: ТК РФ
Оклад на руки: 160 000 – 190 000 к

Обязанности:
Оптимизация обработки данных в GreenPlum для сокращения времени выполнения запросов;
Проектирование и поддержка хранилищ данных в GreenPlum;
Разработка и поддержка dbt-моделей;
Проведение code review, участие в интервью для найма сотрудников.

Обязательные требования:
Опыт работы в роли Data Engineer/Data analytic от 3 лет;
Глубокие знания SQL;
Опыт работы с GreenPlum;
Опыт построения и оптимизации ETL-процессов;
Умение проводить code review и работать в команде;
Понимание принципов Agile (Scrum, Kanban) и опыт работы с Jira/Trello;
Английский язык на уровне чтения технической документации.
Желательные требования:
Опыт миграции данных из SAS в GreenPlum;
Опыт работы с dbt;
Понимание методологий проектирования хранилищ данных (Data Vault, Anchor modelling).

Контактная информация:
Тг: @HR7RedLines
Эл.почта: i.filimonova@7rlines.com (mailto:i.filimonova@7rlines.com)


@ml_data_science_job

Data Engineer/ Search Engineer

#вакансия #dataengineer #Elasticsearch #AWS
Location: Remote (outside of Russia)
Work format: Remote, Full-time
Salary range: $25-35 per hour
Company name: CloudSquad
Contacts: @natalia_kurland

Our customer is generative AI company headquartered in San Francisco provides a comprehensive AI platform tailored for enterprise use. In late 2023, the company secured $100 million in Series B funding from leading institutional investors, including a prominent growth equity firm and several other major venture capital groups.

We are looking for an experienced Elasticsearch Engineer to help us scale and optimize search infrastructure across multi- and single-tenant environments. You will be responsible for improving performance isolation, managing large-scale clusters (terabytes of data per tenant), and designing a scalable, resilient Elasticsearch/OpenSearch architecture to meet enterprise requirements.

Hiring specifics:

Candidates must be located outside of Russia
Preferred candidates in or near GMT+1 time zones
Minimum 1 years hands-on experience with Elasticsearch required
Minimum 1 years experience with major cloud platforms (AWS/GCP) required
English proficiency: Upper Intermediate (B2+) or higher required

Key Responsibilities:

Optimize and scale multi-tenant Elasticsearch/OpenSearch deployments
Design and implement sharding strategies for performance isolation
Implement backup, recovery, and cross-cluster replication strategies
Collaborate with platform and application teams on data ingestion and retrieval patterns, automated provisioning

Requirements:

3–5+ years managing Elasticsearch/OpenSearch in production at scale
Deep knowledge of cluster design, indexing strategies, and search performance tuning
Experience with AWS OpenSearch, Elasticsearch Service, and/or Elastic Cloud
Familiarity with Kubernetes-based deployments is a plus

Contacts: @natalia_kurland


@ml_data_science_job

#вакансии #dataengineer #Spark #Scala3 #Jenkins

Ищем Инженера по инфраструктуре на курс по Spark для действующих Data Engineer.

О нас:
Standard Data – проектируем и реализуем образовательные решения под заказ крупных компаний в сфере ИИ, дата инжиниринга и веб-разработки.

Задача:
Собрать Jupyter Notebook с ядром Scala, который может:

• запускать код прямо из тетрадки,
• обращаться к реальному Hadoop-кластеру (чтение, запись, обработка данных).

Курс ведётся в формате: преподаватель идёт по тетрадке, рассказывает теорию и показывает практику на реальных данных в кластере.

Формат занятости: проектная работа (один проект)
Оплата: 50 000 ₽

Резюме и рекомендации можно кидать сюда: @KaterinkaGl


@ml_data_science_job

#вакансия #DE #dataengineer

❇️ Data инженер ❇️ | Компания Top Selection

🔥 Мы в поиске Data инженера на проектную занятость

Грейд: Senior
Ставка: от 350-420К
Гражданство/Локация: строго РФ
Загрузка: фуллтайм
Срок: долгосрочный
Оформление: только ИП 📌

✅ Обязательные требования:
- Владение SQL на уровне оптимизированных сложных запросов;
- Понимание принципов функционирования традиционных СУБД и баз данных класса MPP;
- Опыт программирования на языках Python и/или Java, Scala;
- Опыт оркестрации ETL-пайплайнов с помощью Airflow;
- Наличие опыта взаимодействия с инструментом dbt;
- Умение работать с технологиями экосистемы Hadoop (HDFS, YARN, HIVE, Sqoop);
- Владение технологией Apache Spark (Spark DataFrames, Spark SQL);
- Опыт работы с банковской предметной областью.

🔍 Доп.требования
- Опыт работы с Kafka, Trino;
- Опыт работы с контейнерными технологиями и оркестрацией: kubernetes, helm;
- Знания и опыт CI/CD-практик и инструментов.

📌 Текущий основной стек:
Python, Trino, dbt, Airflow, Spark, Hadoop, Hive, Postgres, Greenplum, Kubernetes, Gitlab.

По всем вопросам и с резюме пишите: @aliiS_a (https://t.me/aliiS_a)


@ml_data_science_job

#Вакансия #remote #dataengineer #DE #Middle #AWS #Python #Airbyte

📍 Формат/working arrangement: Удаленно (желательно Алматы, но можно из любой точки мира)
✔️ Должность/position: Data Engineer (Middle+/Senior)
🏢 Место работы/workplace: Быстрорастущий стартап (США), анализ текста для клиентов: OpenAI, Booking, Grubhub, Airbnb и др.
💸 Заработная плата/salary estimate: До $5000 + опционы

📈 Обязанности/responsibilities:
- Разработка и поддержка решений в облачных средах (AWS или GCP)
- Работа с Python
- Использование Airbyte
- Выполнение задач по backend (FastAPI, Async, RAG, LLM)

📌 Требования/requirements:
- Опыт работы с облачными платформами (AWS или GCP)
- Отличное знание Python
- Опыт работы с Airbyte
- Английский язык не ниже уровня B2
- Навыки backend-разработки будут преимуществом

✅ Условия/working conditions:
- Полностью удалённая работа
- Конкурентная компенсация до $5000 + опционы
- Unlimited day offs
- Работа в международной команде
- Участие в проекте с инвестициями и safe period 3–3.5 года

📢❗️🚨 Контакты/Contact information: CV отправлять в Telegram: @atulutaev


@ml_data_science_job

#вакансии #senior #ДатаИнженер #DataEngineer #РФ #senioranalyst #удаленка

Data Engineer Senior

Компания: Luna Capital
Локация: РФ;
Тип работы: удалёнка;
Грейд: Senior
Вилка: 200 000 - 240 000

————————————————
О ПРОЕКТЕ:

Приглашаем опытного Data Engineer для развития интеграционных и аналитических решений в ритейле.
Проект связан с построением и оптимизацией систем хранения и обработки больших данных (DWH, DataLake), интеграцией различных источников и настройкой конвейеров обработки.
Используем современные технологии Big Data и распределённые системы, активно развиваем инфраструктуру.

————————————————
ЧТО НУЖНО ДЕЛАТЬ:

Проектировать и развивать интеграционные решения на стеке BigData

Настраивать и поддерживать ETL-процессы (Apache Nifi, Airflow или аналоги)

Работать с реляционными СУБД (Oracle, Postgres, MySQL, MS SQL и др.), оптимизировать запросы

Разрабатывать и сопровождать хранилища на основе Hadoop, Hive и других инструментов экосистемы

Настраивать CI/CD, деплой проектов в Rancher/Docker

Участвовать в проектировании архитектуры и схем данных (DWH, DataLake)

————————————————
ТРЕБОВАНИЯ:

1. Опыт работы Data Engineer от 4 лет

2. Владение одним из языков программирования (Java, Groovy)

3. Знание принципов ООП, умение читать и разбирать чужой код

4. Опыт работы с системами сборки, деплоем в Rancher, Docker

5. Глубокие знания SQL (индексы, функции, планы запросов, оптимизация)

6. Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MS SQL, DB2 и т.п.)

7. Навыки работы с Git в консоли

8. Знание ETL-инструментов (Apache Nifi, Airflow, Talend, Informatica, SAP BW, SAS и т.п.)

9. Опыт работы с Hadoop, понимание устройства HDFS и форматов данных

10. Опыт работы с Hive или другими хранилищами на базе Hadoop

11. Навыки работы с архитектурными схемами, понимание принципов DWH и DataLake

Будет плюсом:

12. Опыт администрирования Unix/Linux или Hadoop (HDFS, Yarn, Ranger, Spark, Zookeeper)

13. Опыт работы с системами мониторинга и автоматизации (Zabbix, Ansible)

—————————————————-
📩 Отклик в тг: @recruiter_vv
К отклику не забудьте указать что вы из канала , и приложите, пожалуйста: ваше актуальное резюме, а также самостоятельный скрининг по требованиям в формате "+/-", например:
1. Опыт работы Data Engineer от 4 лет +


@ml_data_science_job

#вакансии #dataengineer #Spark #Scala3 #Jenkins #Senior

Друзья, всем привет!

Ищем Преподавателя для уроков и проверки задач на практический курс по разработке на Spark для действующих Data Engineer.

О нас:
Standard Data – проектируем и реализуем образовательные решения под заказ крупных компаний в сфере ИИ, дата инжиниринга и веб-разработки.

Кого ищем:
Преподавателя, которому интересно поучаствовать в качественном образовательном проекте.

Что нужно делать:
•  Проводить занятия, обычно по выбранным (2-4) темам из всего курса. Занятия в формате вебинаров 2 раза в неделю по 2 часа.
•  Общаться в чате и отвечать на вопросы слушателей курса.
•  Проверять домашние задания и давать развернутую обратную связь слушателям.

Что мы ждем от кандидата:
•  От 3 - 5 лет в роли DE, опыт оптимизации высоконагруженных приложений/ETL процессов;
•  Опыт работы со Scala 3; Spark; Kafka + Spark Structured Streaming; Hadoop; Oozie; Yarn.

Что мы предлагаем:
•  Сумма оплаты возможна и больше, всё зависит от опыта, публикаций и результатов собеседования.
•  За проведение одного двухчасового занятия – 10т.р.-20т.р. в зависимости от вашего опыта.
•  За проверку ДЗ и итогового проекта – до 60т.р. в зависимости от количества человек в группе.

Ждем тебя в нашей команде, пишите в тг, или сразу кидайте резюме: @Kate_HR_IT

_____

За успешную рекомендацию по традиции бонус! Суммарно 15т.р.: при прохождении тестового 5 т.р., еще 10 т.р. после 2 месяцев хорошей работы. Если у Вас классный кандидат с большим опытом, то пишите в ЛС, согласуем другой бонус!

@ml_data_science_job

#вакансия #dataengineer #remote #fulltime #Python #NoSQL

Вакансия: Data Engineer/Backend-разработчик (Middle)
Компания: АО «Антиплагиат»

Формат работы: удалёнка
Занятость: полная занятость
Вилка: 255 000 (+/-) gross оклад + годовой бонус
Работа в EdTech компании, в команде инженеров данных.

Ищем Data Engineer/Python dev (Middle), умеющего организовывать автоматизированный сбор данных из различных источников (интернет, API клиентов), а также контролировать качество получаемых данных.

В работе нужно писать краулеры сайтов, разрабатывать службы для получения данных из клиентских API; 80% задач с данными и 20% на разработку.

Ожидания от кандидата:
📌2+ года коммерческого опыта работы с Python.
📌Уверенное знание Python
📌Умение обернуть написанный код в Docker-контейнер
📌Опыт работы с SQL/NoSQL БД
📌Опыт использования Linux. Применяем Debian/Ubuntu

Что предлагает компания?
🔅Аккредитованная IT- компания и дружный коллектив, объединенный в профессиональный комьюнити
🔅Удаленный формат работы
🔅Конкурентная заработная плата (оклад+ годовой бонус)
🔅Ежегодный Performance Review
🔅Обучение, посещение конференций и курсов
🔅ДМС со стоматологией
🔅Скидки и партнёрские программы

Со мной можно связаться:
@UmraSvet
+7 910 457-77-75

@ml_data_science_job

#вакансия #dataengineer #remote #fulltime #senior

💼 Международная технологическая компания с более чем 15-летним опытом работы в области обработки данных и искусственного интеллекта, специализирующаяся на аутстаффинге и техническом консалтинге в поисках Senior Data Engineer на крупный проект для энергетической компании из Германии.

👨‍💻 Какой опыт ожидаем увидеть:
* От 5 лет опыта работы
* Опыт проектирования хранилищ данных и архитектуры данных
* Уверенное владение SQL: написание и оптимизация сложных запросов, работа с большими объёмами данных
* Практический опыт применения методологии Data Vault 2.0
* Владение Python для автоматизации ETL/ELT, обработки и анализа данных
* Опыт с современным стеком: Snowflake (настройка, безопасность, оптимизация), dbt (Core), Apache Airflow (оркестрация пайплайнов)
* Знакомство с Azure DevOps (CI/CD, управление задачами, версионирование)
* Английский — не ниже B2

Что предлагает компания?
* Формат сотрудничества: B2B-договор.
* Полностью удалённая работа из любой точки мира, кроме России, Беларуси и Украины. Доступность в рамках часового пояса CET (до 18:00 CET)
* Рaid bench time.
* Возможность участвовать во внутренних проектах для поддержания загрузки между клиентскими проектами.
* Оплачиваемый больничный.
* Компенсация стоимости сертификаций и обучения.
* Доступ к передовым проектам в области AI и Data.

Вилка: до 5000 usd gross
Формат работы: remote
Занятость: Full Time

📩 Хотите узнать больше?
Напишите мне в тг @veronikavlasovets

@ml_data_science_job

#вакансия #fulltime #remote #senior #dataengineer #llm #rag

Компания Centicore💙 находится в поисках Senior Data Engineer (LLM / RAG).

Мы занимаемся продуктовой и платформенной разработкой под ключ для крупных заказчиков. В рамках проекта команда строит промышленную data-платформу для работы с большими языковыми моделями (LLM) и Retrieval-Augmented Generation (RAG).

Формат работы: Удаленка по РФ
Вилка: 350–380k на руки (в зависимости от опыта и пожеланий кандидата)
Уровень: Senior

🔷 Требования:

Отличное знание Python: структуры данных, итераторы, декораторы,
асинхронное и параллельное программирование, OOP и FP
Уверенное владение SQL: сложные запросы, CTE, оконные функции
Опыт работы с vector DB: OpenSearch, Qdrant
Опыт построения batch и streaming-сервисов для расчёта embeddings и загрузки их в векторные хранилища
Понимание принципов RAG и обогащения LLM контекстными данными
Опыт разработки промышленных ETL-сервисов на Python
Опыт оркестрации пайплайнов: Apache Airflow, Argo Workflows
Хорошее знание Apache Spark / PySpark (производительность, отладка, Spark History Server)
Опыт асинхронного взаимодействия с веб-сервисами по REST API (aiohttp, httpx)
Опыт работы с PostgreSQL, Oracle
Опыт работы с Big Data-хранилищами: Hadoop/HDFS, S3, Hive, Iceberg
Опыт работы в JupyterLab / JupyterHub

🔷 Будет плюсом:

Опыт потоковой обработки данных
Опыт работы в AI / ML / LLM-проектах
Понимание требований к данным для обучения и эксплуатации ML-моделей
Опыт построения отказоустойчивых data-сервисов в enterprise-среде

🔷 Обязанности:

Разработка сервисов пакетной и потоковой обработки данных для вычисления векторных представлений (embeddings)
Загрузка и сопровождение данных в векторных хранилищах для использования в RAG-сценариях
Разработка и поддержка ETL-пайплайнов под управлением Airflow / Argo
Оптимизация SQL-запросов и Spark-приложений
Взаимодействие с командами Data Science, ML/LLM и инфраструктуры
Участие в развитии data-платформы для LLM-решений

💌 Для откликов и вопросов — писать в лс @ktvsk_d
Будем рады знакомству! ❤️

@ml_data_science_job

#вакансия #dataengineer #healthtech #фултайм #москва

Вакансия: Data Engineer
Компания: AstraTech
Формат: гибридный (предпочтительно) / удаленный по РФ
Оформление: ГПХ (после ИС возможен переход на ТК)
Локация: Москва-Сити
Занятость: full-time
Вилка: 270 - 320к ₽ гросс

AI HealthTech стартап создает продукт, который трансформирует привычные процессы в здравоохранении, делая их эффективнее и меняя мир к лучшему 🕊

Сейчас команда в поиске Data Engineer, который будет заниматься построением и оптимизацией ETL-пайплайнов для обработки миллионов строк медицинских данных.
Вам предстоит обеспечивать качество и целостность данных, вы будете работать на стыке клиник, поставщиков данных и ML-команды, обеспечивая стандарты для обучения моделей.

Основные задачи:
· Анализ, нормализация и очистка крупных медицинских датасетов (EHR, анализы, диагнозы).
· Разработка и адаптация ETL-пайплайнов под разные источники данных.
· Контроль качества входящих данных, коммуникация с поставщиками и стейкхолдерами.
· Тесная работа с ML-инженерами над форматами данных и улучшением пайплайнов.

Что ожидаем:
· Опыт работы с Python (Pandas, NumPy, PyTorch; PySpark / Dask - плюс).
· Практика работы с данными масштаба миллионов записей.
· Умение ясно доносить идеи как технической, так и нетехнической аудитории.
· Готовность погружаться в медицинскую специфику.

Будет плюсом:
· Опыт в биоинформатике / медицине / HealthTech.
· Понимание конфиденциальности данных (GDPR / HIPAA).
· Знание медицинских систем кодирования (ICD-10, LOINC).
· Опыт с ETL-оркестрацией (Airflow), FHIR / HL7.

Почему стоит откликнуться?
· AstraTech - это действительно мощная команда талантливых специалистов, в которой есть несколько PhD, они драйвят процессы и привносят по своему уникальные решения в реализацию продукта.
· Возможность применить опыт и развить экспертизу в проекте, который реально помогает людям.
· Высокая степень ответственности и влияния на архитектуру данных и конечный продукт.
· Работа со сложными задачами и современным стеком технологий.

Направляйте ваши отклики с резюме — @Inga_IT 📩

@ml_data_science_job

#вакансия #vacancy #dataengineer #middle #удаленно

🦋 Компания: Twinby
☀️Позиция: Data Engineer (Middle)
💸 Вилка: 200к-280к рублей net
📍 Формат работы: полная занятость, удаленный формат

Всем привет!
Меня зовут Полина, Recruitment Lead в Twinby ☀️

🦋 TWINBY — сервис для проверки совместимости и поиска новых знакомств. Наша цель – стать дейтинг-приложением №1 в России, заменив сам-знаешь-что. У нас это отлично получается: сейчас Twinby скачали уже более 14 миллионов пользователей.

Мы строим надёжную платформу: ingestion → DWH/витрины → BI/аналитика → продуктовые решения. Сейчас мы в поиске Data Engineer'а, который усилит пайплайны, качество данных и производительность хранилища.

Наш стек: Python, ClickHouse, CockroachDB, DataLens, JupyterLab / DataSphere, GitLab, Airflow, AppMetrica / Метрика / GA.

Функции в команде:
- Разрабатывать и поддерживать ETL/ELT-пайплайны в Airflow;
- Проектировать слой данных в ClickHouse: схемы, партиционирование, сортировка, движки (MergeTree-семейство), дедупликация, оптимизация запросов;
- Строить витрины/слои для BI (DataLens) и аналитиков;
- Обеспечивать качество данных: проверки, алерты, контроль свежести/полноты, разбор инцидентов.

Наши ожидания:
- Опыт в data engineering от 2–4 лет;
- Уверенный Python для ETL: работа с API, обработка данных, аккуратная архитектура кода;
- Практический опыт работы с оркестраторами (у нас Airflow): планирование, мониторинг, инциденты, backfill;
- Опыт работы с аналитическими хранилищами (у нас ClickHouse) и понимание его особенностей (partitions/order key, merges, TTL, FINAL, dictionaries/матвью);
- Опыт построения DWH/мартов и слоёв (stg/core/mart), data catalog/lineage;
- Отличный SQL и опыт оптимизации запросов/моделей.

Будет плюсом:
- Углублённое понимание реляционных СУБД и внутренностей: индексы, планы выполнения, нормализация/денормализация, оптимизация запросов;
- Опыт диагностики и решения performance-проблем (у нас есть CockroachDB).

Мы предлагаем:
- Full-time работа с полностью удаленным форматом;
- Официальное оформление по трудовому договору в РФ;
- Конкурентную заработную плату;
- Корпоративные скидки для сотрудников;
- Возможность профессионального развития и карьерного роста.

🦋 Контакт для связи: @pppanini (тг)

@ml_data_science_job

#Dataengineer #Dataинженер #Dataengineerвакансии

Data Engineer

🔥Мы в поиске Дата инженера на проектную занятость

Грейд: middle+|Senior
Ставка: от 272К до 285К
Гражданство/Локация: РФ
Загрузка: фуллтайм
Срок: долгосрочный
Оформление: только ИП 📌


✅ Обязательные требования:
- Опыт работы в роли Data Engineer от 4-х лет;
- Опыт полного цикла создания данных: от проектирования пайплайнов и моделей до внедрения в production и мониторинга;
- Системное мышление, способность проектировать масштабируемые и отказоустойчивые решения, учитывающие объем, скорость и разнообразие данных;
- Навыки эффективной коммуникации с командами аналитики, бизнес-аналитиков, DevOps и разработки продуктов;
- Опыт проведения нагрузочных тестов DataLake-платформ;
- Практический опыт написания эффективных SQL-запросов для анализа и трансформации данных в StarRocks или аналогичных OLAP-системах (ClickHouse, Impala);
- Умение создавать и поддерживать таблицы, партиции, представления;
- Базовое понимание модели данных StarRocks (дублирующиеся/агрегатные таблицы) для реализации готовых решений;
- Опыт загрузки данных (через файлы, INSERT, использование простых коннекторов);
- Работа с HMS через Spark или Hive для создания/обновления таблиц, чтения метаданных. Понимание, для чего нужен каталог метаданных;
- Уверенная работа с Parquet, Iceberg, JSON, CSV. Понимание преимуществ колоночных форматов;
- Опыт написания DAG в Airflow (или аналоги) для планирования регулярных ETL-задач. Понимание принципов идемпотентности и перезапуска задач;
- Интеграция Data Ocean Nova с источниками данных (базы данных, BI-инструменты). Понимание архитектуры таких платформ (часто микросервисной на базе K8s);
- Понимание, как перечисленные компоненты взаимодействуют друг с другом в единой платформе. Например, как запрос из StarRocks через HMS получает метаданные таблиц, а Ranger проверяет права доступа;
- SQL (Продвинутый уровень);
- Сложные JOIN, оконные функции (window functions), агрегации;
- Умение читать и анализировать план выполнения запроса (EXPLAIN) для базовой оптимизации;
- Python (Средний уровень);
- Разработка скриптов для ETL, работа с API, Pandas для обработки данных умеренного объема. Знание основ;
- PySpark: Умение писать и оптимизировать Spark-приложения (DataFrame API) для пакетной обработки данных. Понимание основ работы трансформаций и действий (transformations/actions), принципов партиционирования данных в Spark;
- Kubernetes: Базовое понимание концепций (Pod, Deployment, Service). Опыт запуска и мониторинга своих задач (Spark, контейнеры) в K8s. Умение работать с логами подов.

📆 Задачи:
- Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий, принятых в команде (Java, Groovy, Apache Nifi, Airflow);
- Определение стека технологий для конкретных проектов и задач;
- Решать технически сложные задачи, которые не могут решить другие инженеры в команде;
- Оперативно реагировать на информацию о проблемах в зоне ответственности, выполнять задачи в установленные сроки;
- Разрабатывать и контролировать актуальность документации по взаимодействию конфигурационных единиц платформы больших данных;
- Предоставлять отчеты о своей деятельности начальнику отдела/руководителю в порядке, установленном руководством;
- Контроль качества интеграционных решений с последующим созданием задач/дефектов для рефакторинга;
- Определять технологическую стратегию развития проекта или продукта, работать на перспективу;
- Выстраивать процессы (например, CI/CD, код-ревью), внедрять и развивать инженерные практики.

@aliiS_a

@ml_data_science_job

#вакансия #ГородМосква #удаленнаяработа #DataEngineer

🔆Должность - Data Engineer, Middle и выше
🔶Компания - Арт-Финтех
⌨️Требования к кандидату:
- Гражданство и локация РФ
- Опыт проектирования потоков загрузки данных в хранилища DWH, опыт работы с
промышленными ETL (Informatica PowerCenter как плюс);
- Опыт работы с хранилищами данных (Oracle);
- Понимание финансовых инструментов и особенности их учета по РСБУ как плюс;
- Опыт работы на проектах внедрения/развития хранилищ данных от 3-х лет

✅Чем предстоит заниматься?
- Разработка нового и доработка существующего функционала в КХД;
- Автоматизация алгоритмов расчета трансфертного результата по операциям на
финансовых рынках.
- Загрузка и обработка данных для расчета финансового результата по финансовым инструментам.

🔗Условия:
Full-time, 5/2.
💵Вилка до 320к рублей на руки.

🪩Немного о нас:
Группа компаний «Арт-Финтех» более 20 лет на рынке — международный поставщик инновационных банковских программных решений. Наша компания разрабатывает ПО для финансового сектора
🖋 @Oleghols

@ml_data_science_job

#вакансия #ГородМосква #удаленнаяработа #DataEngineer

🔆Должность - Data Engineer, Middle и выше
🔶Компания - Арт-Финтех
⌨️Требования к кандидату:
- Гражданство и локация РФ
- Опыт проектирования потоков загрузки данных в хранилища DWH, опыт работы с
промышленными ETL (Informatica PowerCenter как плюс);
- Опыт работы с хранилищами данных (Oracle);
- Понимание финансовых инструментов и особенности их учета по РСБУ как плюс;
- Опыт работы на проектах внедрения/развития хранилищ данных от 3-х лет

✅Чем предстоит заниматься?
- Разработка нового и доработка существующего функционала в КХД;
- Автоматизация алгоритмов расчета трансфертного результата по операциям на
финансовых рынках.
- Загрузка и обработка данных для расчета финансового результата по финансовым инструментам.

🔗Условия:
Full-time, 5/2.
💵Вилка до 320к рублей на руки.

🪩Немного о нас:
Группа компаний «Арт-Финтех» более 20 лет на рынке — международный поставщик инновационных банковских программных решений. Наша компания разрабатывает ПО для финансового сектора
🖋 @Oleghols

#вакансия #vacancy #job #middle #dataengineer

Data Engineer в Selectel
Санкт-Петербург, Москва (гибкий гибрид)

Меня зовут Полина, я рекрутер в Selectel.
Мы — продуктовая IT-компания, предоставляем клиентам инфраструктурные решения: свое облако, платформенные сервисы в облаке, а также выделенные серверы — у нас 6 собственных дата-центров.

Основные задачи
- Взаимодействие с владельцами данных по вопросам сбора и качества данных, проведение системного анализа источников
- Разработка и поддержка пайплайнов загрузки данных на Python с использованием DAG’ов Airflow
- Разработка dbt-моделей по ключевым бизнес-процессам по схеме «звезда», создание витрин данных
- Автоматизация процессов, настройка CI/CD пайплайнов, мониторинга и алёртинга
- Участие в развитии процессов Data Quality, Data Catalog и Data Lineage, а также инфраструктуры платформы данных
- Взаимодействие с BI разработчиками и аналитиками

Мы ожидаем
- Опыт работы с реляционными (PostgreSQL) и аналитическими (ClickHouse) базами данных
- Опыт разработки на Python, особенно в сфере написания ELT пайплайнов и разработки DAG’ов Airflow
- Уверенное знание SQL и опыт оптимизации запросов
- Понимание принципов построения DWH
- Базовые знания Linux, Docker, Git, CI/CD

Если стало интересно, буду рада с вами пообщаться в лс: @apolinque

#de #dataengineer #job #vacancy #remote #вакансия #удаленно

🌟 Data Engineer / Java, Spark

Компания: крупный банк РФ
Оплата: 300тр+/месяц
Формат: удаленно по РФ
Занятость: фултайм

Проект: Репликация данных из источников в распределенный облачный кластер и индексирование данных для обработки запросов в режиме реального времени

⭕ Задачи:
Глобально задачи команды — репликация и индексирование данных из различных источников (в основном Apache Hive) в распределенный облачный кластер (тоже Apache Hive), чтобы затем в режиме реального времени отрабатывать запросы через REST или брокеры сообщений (Kafka или IBM MQ) к этим данным (напр., остатки по счетам физ. лиц в ответ на запросы гос. органов, данные о товарах в чеке к покупке в мобильном приложении и проч.)

⭕ Стек:
- JIRA
- Confluence
- Корпоративные мессенджеры
- Outlook
- Scrum

⭕ Требования:
- Базовый уровень знания java (циклы, условия, хешмапы и т.д.)
- Базовый уровень знания и понимание CI/CD
- Linux (basic), Ansible, SQL, Git, XML, JSON, XSLT, YAML
- Базовые знания экосистемы Hadoop и его компонентов (Apache Solr, Apache Hive, Apache HBase, Apache Spark, Apache Zookeper, Apache Oozie, Apache Camel)
- Язык: английский, уровень владения: технический (чтение документации, профильных ресурсов)
.
✅ Рекрутер
@oleg_recruiter

#вакансия #DE #dataengineer #BI #senior #edtech

В быстрорастущий EdTech-продукт ищем Senior Data Engineer, который возьмет ключевую роль в развитии аналитической платформы и BI-направления.

Позиция предполагает влияние на весь контур работы с данными: от общения с бизнесом до построения устойчивой инфраструктуры.
Команда - 60+ человек, стек: Node.js, PostgreSQL, ClickHouse, Kubernetes.

Мы предлагаем:
— удаленную работу и гибкий график;
— возможность влиять на процессы и предлагать новые подходы;
— рост вместе с компанией: команда растет, появляются новые направления и задачи;
— вовлеченную команду, которой важны продукт и его польза для пользователей;
— работу, где виден результат, продуктом ежедневно пользуются тысячи школьников и их родители;

Задачи:
— развитие и поддержка data-платформы (DWH + Data Lake);
— проектирование и оптимизация ETL/ELT и data pipelines;
— перевод бизнес-задач в технические решения;
— контроль качества данных и настройка мониторинга;
— работа с отчетностью, дашбордами и визуализацией;
— взаимодействие со стейкхолдерами;

Требования:
— опыт работы с данными от 4–6 лет;
— уверенный SQL, оптимизация запросов;
— опыт с PostgreSQL и ClickHouse;
— Python для аналитики и автоматизации;
— опыт с Data Lake / Lakehouse или Spark / Hadoop / Databricks;
— Airflow, dbt;
— понимание архитектуры DWH;
— опыт работы с BI-инструментами (Power BI / Tableau / DataLens);
— опыт работы с бизнес-заказчиками;
— участие в построении аналитических решений.

По всем вопросам и с CV пишите: @hello_techrecruiter

@ml_data_science_job

#DE #dataengineer #vacancy #remote #вакансия #удаленно

✅ Data Engineer middle+ (ритейл)

Компания: SPBDev
Локация: Любая
Формат: удаленно
Период: Долгосрок
Сфера: Ритейл
Опыт - от 4х лет
Оплата - 200-280тр/мес

*Требования:*
Наш стек: Greenplum, Trino, Apache Airflow, ClickHouse, Python, Spark, SQL (dbt), S3, Hadoop

- Сбор требований с бизнес-заказчиков и анализ источников данных
- Разработка, реализация и поддержка интеграционных потоков, а также потоков сборки витрин-данных на стеке технологий, принятых в команде: Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных. Предоставление отчетности о своей деятельности руководителю.

*Задачи:*
- Общее представление о стеке технологий Lakehouse
- Понимание различия работы между BigData/Lakehouse и с данными обычного размера
- Знание SQL (индексы, функции, оптимизация, профилирование производительности
- Знание языков программирования (JAVA, Python)
- Опыт работы c реляционными БД (Oracle, Postgres, MySQL, MsSQL,т.п.)
- Умение работать с Git (знание команд git pull/commit/push)
- Опыт работы с DBT, Cosmos, Ni-Fi
- Опыт разработки на Spark
- Понимание особенностей Trino
- Понимание форматов данных Iceberg, Parquet, Avro
- Понимание работы с minio или любого другого хранилища на основе S3
- Опыт использования системами ведения проектов и документации
.
Рекрутер
@oleg_recruiter

#вакансия #fulltime #remote #dataengineer #datasupport #etl #bigdata

Компания Centicore находится в поисках Инженера сопровождения дата-продуктов / Data Support Engineer на проекты крупного банка. Наша компания занимается продуктовой разработкой проектов наших Заказчиков под ключ.

Вакансия: Инженер сопровождения дата-продуктов / Data Support Engineer
Формат работы: Удаленно по РФ
Вилка: 300-330к на руки (в зависимости от опыта и пожеланий кандидата)
Технический уровень: Middle / Middle+

Команда занимается задачами сопровождения дата продуктов.

🔷Технические требования:
ЯП: SQL, Python
Технологический стек: Apache Spark, Hadoop\S3\S3-like, Apache Airflow, Parquet\ORC. Знание Apache Iceberg будет плюсом
Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON
Навыки системного анализа, тестирования
Базовое знание работы с РСУБД, Kafka

Важно:
- SQL , Spark, Hadoop, Airflow/oozie, понимание ETL , Airflow/oozie, , умение читать код (чтобы понимать как данные из одного места транслируются в другое)


🔷 Задачи:
Сопровождать и анализировать существующие процессы загрузки данных;
Разбирать технические контроли качества данных;
Тестировать доработки и устанавливать их в продуктивный контур;
Анализировать логику ETL-процессов и движение данных между системами;
Взаимодействовать с внутренними командами по вопросам качества и стабильности дата-продуктов;
Поддерживать корректную работу процессов загрузки и обработки данных.

——
⚠️ Безопасность соискателя! Участились случаи целевого HR-скама (блокировка личных MacBook, кража персональных данных, и т.д.). Если работодатель требует авторизоваться в чужом Apple ID, установить MDM-профиль или внести страховой взнос — немедленно прервите контакт, и сообщите администрации нашего канала (контакты есть в информации о канале @).
🔗 Перед откликом обязательно изучите Регламент безопасности канала (https://telegra.ph/VNIMANIYU-SOISKATELEJ-REGLAMENT-INFORMACIONNOJ-I-FINANSOVOJ-BEZOPASNOSTI-05-18).
——

💌 Контакт: для вопросов и резюме — в лс @ktvsk_d

@ml_data_science_job