#data #python #мск
В область обработки и анализа количественных и альтернативных «больших данных» на финансовых рынках нужен разработчик на позицию Data Developer.
• от 100 до 140 000
• Москва
https://bit.ly/2pRPxK4
В область обработки и анализа количественных и альтернативных «больших данных» на финансовых рынках нужен разработчик на позицию Data Developer.
• от 100 до 140 000
• Москва
https://bit.ly/2pRPxK4
#BigData #Data_Analyst #Python #Junior #Middle
Национальный центр когнитивных разработок Университета ИТМО (НЦКР) запускает программу отбора кадров на трудоустройство. Мы ищем специалистов с опытом работы в E-Science и интересом к большим данным.
В рамках конкурса соискателям предлагается решить задачи по совершенствованию сбора и обработки данных для разработок НЦКР: систем поддержки принятия решений на основе больших данных для бизнеса и промышленности, фреймворка генеративного машинного обучения, сервисов по рекомендациям авто и недвижимости, событийного агрегатора и приложений обратной связи для академических кругов и сервисов "умного города".
Каждому направлению разработок соответствует своя информационная карта с детальным описанием и условиями решения задач.
По результатам отбора участнику может быть предложено трудоустройство в НЦКР для дальнейшей совместной работы над представленными разработками. К участию приглашаются как отдельные специалисты, так и команды.
Требования к соискателям:
— наличие высшего технического образования, либо близость его получения (последний год обучения магистратуры тоже подходит);
— наличие опыта разработок в перечисленных областях;
Сроки конкурсного отбора:
— Заявки принимаются до 01.08.2020
Информация о мероприятии: https://actcognitive.org/posts/94/it-recruiter-progra..
Национальный центр когнитивных разработок Университета ИТМО (НЦКР) запускает программу отбора кадров на трудоустройство. Мы ищем специалистов с опытом работы в E-Science и интересом к большим данным.
В рамках конкурса соискателям предлагается решить задачи по совершенствованию сбора и обработки данных для разработок НЦКР: систем поддержки принятия решений на основе больших данных для бизнеса и промышленности, фреймворка генеративного машинного обучения, сервисов по рекомендациям авто и недвижимости, событийного агрегатора и приложений обратной связи для академических кругов и сервисов "умного города".
Каждому направлению разработок соответствует своя информационная карта с детальным описанием и условиями решения задач.
По результатам отбора участнику может быть предложено трудоустройство в НЦКР для дальнейшей совместной работы над представленными разработками. К участию приглашаются как отдельные специалисты, так и команды.
Требования к соискателям:
— наличие высшего технического образования, либо близость его получения (последний год обучения магистратуры тоже подходит);
— наличие опыта разработок в перечисленных областях;
Сроки конкурсного отбора:
— Заявки принимаются до 01.08.2020
Информация о мероприятии: https://actcognitive.org/posts/94/it-recruiter-progra..
actcognitive.org
IT recruiter, программа отбора кандидатов на трудоустройство в НЦКР - НЦКР
Национальный центр когнитивных разработок — центр компетенции Национальной технологической инициативы созданный в 2018 году на базе Университета ИТМО
#вакансия #data_scientist #senior #remote #eng #python #data #science #тимлид #teamlead
Компания #bellintegrator
Локация #удаленка #москва
З/п: 300 000 - 700 000 р
Контакты @kostya_hunter
Company: Bell Integrator
Vacancy: Lead Data Scientist
We are creating a product which supposed to make machine learning available for any type of users. And now are looking for people who shares our ambitious to make machine learning available for everyone.
Responsibilities:
🔸Engage in work on automating data preprocessing & feature engineering methods,
🔸Learn new approaches
🔸Conduct experiments, write a lot of code.
Hard skills:
🔸5 years in an applied data science role
🔸Fluency with scripting (Python or R)
🔸Hands-on experience with pandas, numpy, sklearn, matplotlib, seaborn, xgboost or R corresponding packages
🔸Ability to independently perform complete machine learning projects including data cleaning/processing, EDA, hypothesis generation/testing, feature engineering, algorithm selection/tuning/validation, and generation of experiment reports
🔸Knowledge of metrics definitions and differences, and metrics optimization techniques
🔸Understanding of Logistic/Linear regression, Decision Trees/Random Forest/Boosted Trees/ neural networks frameworks
🔸Ability to explain strong and weak points of the above algorithms’ applications
🔸Strong knowledge of Statistics
We offer:
🔸Innovative state of the art SaaS product development
🔸Stellar team of Data Science professionals
🔸Competitive compensation & benefits package
🔸Work with newest algorithms, NN frameworks
🔸Participation in the TOP DS community events
🔸Remote work option
Компания #bellintegrator
Локация #удаленка #москва
З/п: 300 000 - 700 000 р
Контакты @kostya_hunter
Company: Bell Integrator
Vacancy: Lead Data Scientist
We are creating a product which supposed to make machine learning available for any type of users. And now are looking for people who shares our ambitious to make machine learning available for everyone.
Responsibilities:
🔸Engage in work on automating data preprocessing & feature engineering methods,
🔸Learn new approaches
🔸Conduct experiments, write a lot of code.
Hard skills:
🔸5 years in an applied data science role
🔸Fluency with scripting (Python or R)
🔸Hands-on experience with pandas, numpy, sklearn, matplotlib, seaborn, xgboost or R corresponding packages
🔸Ability to independently perform complete machine learning projects including data cleaning/processing, EDA, hypothesis generation/testing, feature engineering, algorithm selection/tuning/validation, and generation of experiment reports
🔸Knowledge of metrics definitions and differences, and metrics optimization techniques
🔸Understanding of Logistic/Linear regression, Decision Trees/Random Forest/Boosted Trees/ neural networks frameworks
🔸Ability to explain strong and weak points of the above algorithms’ applications
🔸Strong knowledge of Statistics
We offer:
🔸Innovative state of the art SaaS product development
🔸Stellar team of Data Science professionals
🔸Competitive compensation & benefits package
🔸Work with newest algorithms, NN frameworks
🔸Participation in the TOP DS community events
🔸Remote work option
#вакансия #data_scientist #senior #remote #eng #python #data #science
Компания #bellintegrator
Локация #удаленка #москва
З/п: 200 000 - 600 000 р
Контакты @kostya_hunter
Company: Bell Integrator
Vacancy: Customer Facing Data Scientist
We are creating a unique product which is supposed to make machine learning available for any type of users. Today we all witness a blast with using AI technologies everywhere and at the same time almost all similar solutions are created by very rare and expensive specialists.
Main Requirements
🔸 4-5+ years of real-world business experience in a data science role
🔸 Fluent English
🔸 Exceptional communication, writing and interpersonal skills
🔸 Readiness to work overtime in the Russian and US time zones.
🔸 Hands-on experience building and implementing predictive models using machine learning algorithms and tools for solving regression and classification problems
🔸 Strong customer interaction experience
🔸 Strong project management skills
🔸 Strong knowledge of statistics
🔸 Familiarity with a variety of technical tools for the manipulation of datasets
🔸 Fluency with scripting (Python / R)
🔸 Readiness to relocate to the US office
Компания #bellintegrator
Локация #удаленка #москва
З/п: 200 000 - 600 000 р
Контакты @kostya_hunter
Company: Bell Integrator
Vacancy: Customer Facing Data Scientist
We are creating a unique product which is supposed to make machine learning available for any type of users. Today we all witness a blast with using AI technologies everywhere and at the same time almost all similar solutions are created by very rare and expensive specialists.
Main Requirements
🔸 4-5+ years of real-world business experience in a data science role
🔸 Fluent English
🔸 Exceptional communication, writing and interpersonal skills
🔸 Readiness to work overtime in the Russian and US time zones.
🔸 Hands-on experience building and implementing predictive models using machine learning algorithms and tools for solving regression and classification problems
🔸 Strong customer interaction experience
🔸 Strong project management skills
🔸 Strong knowledge of statistics
🔸 Familiarity with a variety of technical tools for the manipulation of datasets
🔸 Fluency with scripting (Python / R)
🔸 Readiness to relocate to the US office
#Вакансия #vacancy #Data Engineer
#HypeAuditor #удаленка
Компания HypeAuditor (Санкт-Петербург, удаленка)
Data Engineer
HypeAuditor - это SaaS-компания, предлагающая комплексные решения для брендов, агентств и платформ, работающих с инфлюенсерами. HypeAuditor разработал всеобъемлющий набор инструментов для обнаружения и сравнения влиятельных лиц в глобальных соцсетях (Instagram, YouTube, TikTok, Twitch, Twitter), проверки подлинности их учетных записей и отслеживания результатов маркетинговых кампаний. Все проекты внутри HypeAuditor основаны на алгоритмах машинного обучения. Это позволяет идентифицировать поведенческие паттерны, на основании которых алгоритм делает выводы.
Цель HypeAuditor - предоставить качественные аналитические услуги, чтобы бренды и агентства могли работать с блогерами максимально эффективно.
HypeAuditor — это:
* команда, в которой работает более 100 человек;
* наша ежемесячная аудитория больше 300 тысяч человек по всему миру;
* в сердце Аудитора — искусственный интеллект, определяющий более 40 характеристик аудитории любого блогера (Instagram, YouTube, Tik-Tok, Twitch, Twitter);
* мы запустились в феврале 2018 и с тех пор показываем ежеквартальный кратный рост;
* о проблеме, которую мы решаем, говорят Unilever и сам Instagram, аналитикой пользуется Forbes.
Сейчас мы ищем разработчика, который будет работать над развитием и поддержкой нашей системы сбора и анализа данных (в команде дата инженеров уже есть три человека, ищем еще двоих коллег).
Наша система обрабатывает миллионы событий в минуту, хранит терабайты сырых данных и делает сотни тысяч rpm к базам.
Ядро написано на GO/PHP. В качестве основного хранилища мы используем MongoDB, MySQL, Clickhouse, для задач машинного обучения – Python с библиотеками Keras и CUDA.
Задачи:
* Разработка сервиса сбора, хранения и доступа к статистике и данным (ETL/Data Warehouse);
* Проектирование, деплой и поддержка инфраструктуры проекта;
* Какими знаниями нужно обладать:
* Хорошие знания Go/PHP и желание эти знания расширять;
* Опыт понимание и работы с SQL/NoSQL/TimeSeries БД;
* Хорошее понимание сетевого взаимодействия;
* Навыки разработки многопоточных приложений;
* Опыт проектирования высоконагруженных сервисов.
Будет плюсом:
* Опыт работы на других языках программирования Python / Js (Node) / etc;
* Опыт работы с другими базами данных и хранилищами.
* Опыт работы с Elasticsearch;
* Опыт работы с системами очередей;
* Опыт написания и поддержки кода, работающего под высокой нагрузкой в режиме 24x7;
* Опыт профилирования производительности приложений, написанных на Go / PHP .
Какие личные качества мы хотим видеть в кандидате:
* Продуктовое мышление. Желание создавать качественный продукт, а не пилить фичи, какие скажут;
* Внимательность и организованность;
* Самостоятельность (чтоб ставить задачи себе и добиваться их качественного решения в срок);
* Умение эффективно работать в команде.
Мы предлагаем:
* Работу в международной компании с крутой командой экспертов, интересные задачи, сложные проекты, возможность внести весомый вклад в создание продуктов, которыми пользуются сотни тысяч людей по всему миру.
* Реальную возможность влиять на продукт, а не быть винтиком в огромной корпоративной махине.
* Соблюдение норм ТК РФ (полностью белая зарплата).
* Компенсация питания, льготные условия по ДМС и изучению английского языка.
* Офис в десяти минутах ходьбы от метро «Горьковская» (можно без проблем работать удаленно).
* Заработная плата (110тр-180тр на руки).
* Всевозможные закуски, фрукты, овощи и напитки без ограничений.
* Регулярные спортивные мероприятия для желающих, поездки, походы, корпоративные праздники и вечеринки.
Как выглядит процесс найма:
Интервью с рекрутером - техническое интервью - менеджерское интервью - офер.
Контакты - 2408664@gmail.com
#HypeAuditor #удаленка
Компания HypeAuditor (Санкт-Петербург, удаленка)
Data Engineer
HypeAuditor - это SaaS-компания, предлагающая комплексные решения для брендов, агентств и платформ, работающих с инфлюенсерами. HypeAuditor разработал всеобъемлющий набор инструментов для обнаружения и сравнения влиятельных лиц в глобальных соцсетях (Instagram, YouTube, TikTok, Twitch, Twitter), проверки подлинности их учетных записей и отслеживания результатов маркетинговых кампаний. Все проекты внутри HypeAuditor основаны на алгоритмах машинного обучения. Это позволяет идентифицировать поведенческие паттерны, на основании которых алгоритм делает выводы.
Цель HypeAuditor - предоставить качественные аналитические услуги, чтобы бренды и агентства могли работать с блогерами максимально эффективно.
HypeAuditor — это:
* команда, в которой работает более 100 человек;
* наша ежемесячная аудитория больше 300 тысяч человек по всему миру;
* в сердце Аудитора — искусственный интеллект, определяющий более 40 характеристик аудитории любого блогера (Instagram, YouTube, Tik-Tok, Twitch, Twitter);
* мы запустились в феврале 2018 и с тех пор показываем ежеквартальный кратный рост;
* о проблеме, которую мы решаем, говорят Unilever и сам Instagram, аналитикой пользуется Forbes.
Сейчас мы ищем разработчика, который будет работать над развитием и поддержкой нашей системы сбора и анализа данных (в команде дата инженеров уже есть три человека, ищем еще двоих коллег).
Наша система обрабатывает миллионы событий в минуту, хранит терабайты сырых данных и делает сотни тысяч rpm к базам.
Ядро написано на GO/PHP. В качестве основного хранилища мы используем MongoDB, MySQL, Clickhouse, для задач машинного обучения – Python с библиотеками Keras и CUDA.
Задачи:
* Разработка сервиса сбора, хранения и доступа к статистике и данным (ETL/Data Warehouse);
* Проектирование, деплой и поддержка инфраструктуры проекта;
* Какими знаниями нужно обладать:
* Хорошие знания Go/PHP и желание эти знания расширять;
* Опыт понимание и работы с SQL/NoSQL/TimeSeries БД;
* Хорошее понимание сетевого взаимодействия;
* Навыки разработки многопоточных приложений;
* Опыт проектирования высоконагруженных сервисов.
Будет плюсом:
* Опыт работы на других языках программирования Python / Js (Node) / etc;
* Опыт работы с другими базами данных и хранилищами.
* Опыт работы с Elasticsearch;
* Опыт работы с системами очередей;
* Опыт написания и поддержки кода, работающего под высокой нагрузкой в режиме 24x7;
* Опыт профилирования производительности приложений, написанных на Go / PHP .
Какие личные качества мы хотим видеть в кандидате:
* Продуктовое мышление. Желание создавать качественный продукт, а не пилить фичи, какие скажут;
* Внимательность и организованность;
* Самостоятельность (чтоб ставить задачи себе и добиваться их качественного решения в срок);
* Умение эффективно работать в команде.
Мы предлагаем:
* Работу в международной компании с крутой командой экспертов, интересные задачи, сложные проекты, возможность внести весомый вклад в создание продуктов, которыми пользуются сотни тысяч людей по всему миру.
* Реальную возможность влиять на продукт, а не быть винтиком в огромной корпоративной махине.
* Соблюдение норм ТК РФ (полностью белая зарплата).
* Компенсация питания, льготные условия по ДМС и изучению английского языка.
* Офис в десяти минутах ходьбы от метро «Горьковская» (можно без проблем работать удаленно).
* Заработная плата (110тр-180тр на руки).
* Всевозможные закуски, фрукты, овощи и напитки без ограничений.
* Регулярные спортивные мероприятия для желающих, поездки, походы, корпоративные праздники и вечеринки.
Как выглядит процесс найма:
Интервью с рекрутером - техническое интервью - менеджерское интервью - офер.
Контакты - 2408664@gmail.com
💡Главный #data-аналитик
#Альфа-Банк, b2b
💵 ЗП: до 240 на руки и квартальный бонус
🌃 Локация: Москва, можно гибрид/удаленно (рассматриваем кандидатов из РФ, РБ, Казахстана и Армении)
⌚️ Занятость: полная
Задачи:
- Подготовка регулярной отчетности (ежедневной/ежемесячной);
- Анализ бизнес-процессов, выявление узких мест и проблемных зон;
- согласование требований и разработка дэшбордов, визуализация данных;
- сегментация данных, формирование и тестирование гипотез, запуск A/B тестов, поиск зависимостей, в том числе статистическими методами;
- Ad hoc аналитика по запросу (подготовка выгрузок с помощью SQL-скриптов);
- формирование требований к разработке витрин данных, контроль реализации и внедрения;
- выполнение ad-hoc запросов;
Требования:
уверенное знание SQL и умение работы с типовыми СУБД;
-математический бэкграунд - умение правильно считать статистику, метрики, показатели, прогнозы;
- логическое мышление - умение выстраивать последовательную работу по проверке гипотез, делать обоснованные выводы из имеющихся результатов аналитики;
-грамотная письменная и устная речь;
- проактивность и инициативность
Что мы предлагаем:
- Официальное трудоустройство;
- Ежегодную индексацию зарплаты;
- ДМС со стоматологией, технику;
- Драйвовую и заботливую корпоративную культуру.
Контакт для связи:
@alla_belo4ka
alla454belova@yandex.ru
#Альфа-Банк, b2b
💵 ЗП: до 240 на руки и квартальный бонус
🌃 Локация: Москва, можно гибрид/удаленно (рассматриваем кандидатов из РФ, РБ, Казахстана и Армении)
⌚️ Занятость: полная
Задачи:
- Подготовка регулярной отчетности (ежедневной/ежемесячной);
- Анализ бизнес-процессов, выявление узких мест и проблемных зон;
- согласование требований и разработка дэшбордов, визуализация данных;
- сегментация данных, формирование и тестирование гипотез, запуск A/B тестов, поиск зависимостей, в том числе статистическими методами;
- Ad hoc аналитика по запросу (подготовка выгрузок с помощью SQL-скриптов);
- формирование требований к разработке витрин данных, контроль реализации и внедрения;
- выполнение ad-hoc запросов;
Требования:
уверенное знание SQL и умение работы с типовыми СУБД;
-математический бэкграунд - умение правильно считать статистику, метрики, показатели, прогнозы;
- логическое мышление - умение выстраивать последовательную работу по проверке гипотез, делать обоснованные выводы из имеющихся результатов аналитики;
-грамотная письменная и устная речь;
- проактивность и инициативность
Что мы предлагаем:
- Официальное трудоустройство;
- Ежегодную индексацию зарплаты;
- ДМС со стоматологией, технику;
- Драйвовую и заботливую корпоративную культуру.
Контакт для связи:
@alla_belo4ka
alla454belova@yandex.ru
Telegram
Katerina Yuranova
IT Recruiter
#удаленно #remote #Москва
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst.
Основаная часть работы - анализ Легаси, создание нового на тех же источниках.
Ожидаем по навыкам:
• Опыт работы с реляционными БД.
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных в легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst.
Основаная часть работы - анализ Легаси, создание нового на тех же источниках.
Ожидаем по навыкам:
• Опыт работы с реляционными БД.
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных в легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#удаленно #remote #Москва
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst.
Основаная часть работы - анализ Легаси, создание нового на тех же источниках.
Ожидаем по навыкам:
• Опыт работы с реляционными БД.
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных в легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst.
Основаная часть работы - анализ Легаси, создание нового на тех же источниках.
Ожидаем по навыкам:
• Опыт работы с реляционными БД.
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных в легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#удаленно #remote #Москва
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst, сфера: финтех
Ожидаем по навыкам:
• Опыт работы с реляционными БД
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst, сфера: финтех
Ожидаем по навыкам:
• Опыт работы с реляционными БД
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Подробности вакансии можем обсудить, пишите, пожалуйста в ТГ @SueBrut
#удаленно #remote #Москва
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst, сфера: финтех
Ожидаем по навыкам:
• Опыт работы с реляционными БД
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Пишите, пожалуйста в ТГ @SueBrut
#data #engineer #data #analytics
В формате сотрудничества через ИП ищем Data Engineer с функциями Data Analyst, сфера: финтех
Ожидаем по навыкам:
• Опыт работы с реляционными БД
• Умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию для обеспечения прозрачности, история изменений и восстановления данных.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Язык програмирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционная СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow,настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.
Задачи:
• Анализ источников данных легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.
Доход обсуждаем в зависимости от опыта. Удаленный формат работы.Фултайм.
Пишите, пожалуйста в ТГ @SueBrut
#Ереван #Армения #DataEngineer #Senior #Data #Armenia
Ищем Senior Data Engineer, международный проект на 1,5 года (предпочитительно с опытом работе в финтехе, банкинге).
Работа в офисе в Ереване.
-Опыт работы в роли Data Engineer от 5 лет.
- PostgreSQL: написание сложных запросов, оптимизация
-ClickHouse:Опыт создания таблиц, материализованных представлений, распределенных запросов, оптимизация
-Airflow: разработка DAG, использование операторов (Python, SQL, Sensor), управление зависимостями, настройка инфраструктуры
-DBT: Опыт написания моделей, макросов, тестов, документации, управление сборками
-Python: Умение писать поддерживаемый код (для кастомных операторов, скриптов обработки
- Проектирование DWH: Понимание схем (звезда, снежинка, Data Vault), опыт проектирования слоев ODS, DDS, DM
- Опыт с Git, CI/CD для пайплайнов, знание Docker, Kubernetes – преимущество.
- Опыт реализации решений для единого профиля клиента (Customer 360)/ кастомизация платформ.
- Работа с брокерами, инструменты проверки качества (Great Expectations, Soda).
Писать в ТГ @SueBrut
Спасибо!
Ищем Senior Data Engineer, международный проект на 1,5 года (предпочитительно с опытом работе в финтехе, банкинге).
Работа в офисе в Ереване.
-Опыт работы в роли Data Engineer от 5 лет.
- PostgreSQL: написание сложных запросов, оптимизация
-ClickHouse:Опыт создания таблиц, материализованных представлений, распределенных запросов, оптимизация
-Airflow: разработка DAG, использование операторов (Python, SQL, Sensor), управление зависимостями, настройка инфраструктуры
-DBT: Опыт написания моделей, макросов, тестов, документации, управление сборками
-Python: Умение писать поддерживаемый код (для кастомных операторов, скриптов обработки
- Проектирование DWH: Понимание схем (звезда, снежинка, Data Vault), опыт проектирования слоев ODS, DDS, DM
- Опыт с Git, CI/CD для пайплайнов, знание Docker, Kubernetes – преимущество.
- Опыт реализации решений для единого профиля клиента (Customer 360)/ кастомизация платформ.
- Работа с брокерами, инструменты проверки качества (Great Expectations, Soda).
Писать в ТГ @SueBrut
Спасибо!