Спешим к вам с нашей новой статьей в блоге X5 Tech на Хабр.
Борис Мурашин - системный архитектор развития платформы больших данных в Х5 Tech - делится своим опытом работы с кластером Hadoop.
💡Как с помощью сторонней библиотеки удалось организовать оперативную выгрузку образа файловой системы HDFS в Hive.
💡Как сэкономить массу времени в работе с кластером.
💡Сколько места на диске используют таблицы Hive в HDFS? В каких из них много мелких файлов? Какая динамика у этих цифр? Что происходит в домашних каталогах пользователей? Кто прямо сейчас создаёт таблицу с партиционированием по timestamp и скоро «уложит» нэймноду по GC pause?
Давайте разбираться.
Борис Мурашин - системный архитектор развития платформы больших данных в Х5 Tech - делится своим опытом работы с кластером Hadoop.
💡Как с помощью сторонней библиотеки удалось организовать оперативную выгрузку образа файловой системы HDFS в Hive.
💡Как сэкономить массу времени в работе с кластером.
💡Сколько места на диске используют таблицы Hive в HDFS? В каких из них много мелких файлов? Какая динамика у этих цифр? Что происходит в домашних каталогах пользователей? Кто прямо сейчас создаёт таблицу с партиционированием по timestamp и скоро «уложит» нэймноду по GC pause?
Давайте разбираться.
👏6👍2🔥2
🔔Ставим напоминание!
Ровно через час, в 18:00 начнётся внешний митап по тестированию QA Meetup #3.
На этот раз со спикерами из АТОЛ, ВТБ, Metro Cash&Carry и X5 Tech обсудим всё: от автоматизации до карьерных перспектив тестировщика.
Если вы еще не успели зарегистрироваться, сделайте это по ссылке. Трансляцию можно будет посмотреть здесь.
Присоединяйтесь!
Ровно через час, в 18:00 начнётся внешний митап по тестированию QA Meetup #3.
На этот раз со спикерами из АТОЛ, ВТБ, Metro Cash&Carry и X5 Tech обсудим всё: от автоматизации до карьерных перспектив тестировщика.
Если вы еще не успели зарегистрироваться, сделайте это по ссылке. Трансляцию можно будет посмотреть здесь.
Присоединяйтесь!
🔥8👍2😁1
Что бы такое послушать вечером?
🎙Включайте новый сезон нашего подкаста Data Therapy!
Первый выпуск вышел и правда огненным. Тема говорит сама за себя:
«Математикам надо идти в медицину. Что может быть лучше, чем спасать жизни?»
В первом эпизоде нового сезона мы расскажем о применении искусственного интеллекта в медицине. Вместе с нашими гостями — Владимиром Кохом, исполнительным директором по исследованию данных Сбера, и Ольгой Кардымон, научным сотрудником, руководителем группы «Биоинформатика» Института искусственного интеллекта AIRI — ответим на следующие вопросы:
- Как и когда ИИ вообще начали применять в медицине?
- В каких направлениях медицины ИИ сегодня применяется наиболее широко?
- Как ИИ может по фото человека определить наследственные генетические заболевания?
- С какими проблемами сталкиваются специалисты, внедряющие ИИ в медицинскую практику?
- Какое будущее у ИИ в медицине?
🎤Ведущий подкаста — Дмитрий Прусов, директор департамента монетизации данных Х5 Tech.
Apple
Яндекс
🎙Включайте новый сезон нашего подкаста Data Therapy!
Первый выпуск вышел и правда огненным. Тема говорит сама за себя:
«Математикам надо идти в медицину. Что может быть лучше, чем спасать жизни?»
В первом эпизоде нового сезона мы расскажем о применении искусственного интеллекта в медицине. Вместе с нашими гостями — Владимиром Кохом, исполнительным директором по исследованию данных Сбера, и Ольгой Кардымон, научным сотрудником, руководителем группы «Биоинформатика» Института искусственного интеллекта AIRI — ответим на следующие вопросы:
- Как и когда ИИ вообще начали применять в медицине?
- В каких направлениях медицины ИИ сегодня применяется наиболее широко?
- Как ИИ может по фото человека определить наследственные генетические заболевания?
- С какими проблемами сталкиваются специалисты, внедряющие ИИ в медицинскую практику?
- Какое будущее у ИИ в медицине?
🎤Ведущий подкаста — Дмитрий Прусов, директор департамента монетизации данных Х5 Tech.
Apple
Яндекс
🔥8❤3🤔1
Лена Райан, фронтенд-разработчик в Х5 Tech, делится подборкой ТОП-10 онлайн-ресурсов по фронтенду, которые будут полезны как новичкам, так и желающим подтянуть свои знания по этой теме.
📖 Будет что почитать на выходных!
Подборка подойдёт также тем, кто только недавно пришёл в IT или в профессию фронтендера и хочет понять, с какой базы им начать.
Читайте в нашем блоге на Хабре
📖 Будет что почитать на выходных!
Подборка подойдёт также тем, кто только недавно пришёл в IT или в профессию фронтендера и хочет понять, с какой базы им начать.
Читайте в нашем блоге на Хабре
🔥7
X5 Tech стала партнером первого форума РБК о цифре и технологиях.
Старт конференции уже завтра-22 ноября в 10:00.
X5 Tech представляют сразу два участника. Максим Осорин выступит в секции Клаудтех о настоящем и будущем облачных технологий.
А Михаил Неверов а AI tech, где обсудят автоматизацию рутинных процессов, импортозамещение и AI под капотом.
Зарегистрироваться, чтобы послушать наших лучших спикеров, можно онлайн или офлайн тут.
Старт конференции уже завтра-22 ноября в 10:00.
X5 Tech представляют сразу два участника. Максим Осорин выступит в секции Клаудтех о настоящем и будущем облачных технологий.
А Михаил Неверов а AI tech, где обсудят автоматизацию рутинных процессов, импортозамещение и AI под капотом.
Зарегистрироваться, чтобы послушать наших лучших спикеров, можно онлайн или офлайн тут.
👍10
Компания X5 Group стала победителем значимой премии в области работы с данными - CDO/CDTO Awards. 🎉
Важно, что престижную награду получил не отдельный проект или направление работы с данными - мы победили в номинации "Цифровая культура". Вся многолетняя работа команды Тиграна Саркисова и X5 Tech в целом была собрана в проект "Цифровая культура как часть ДНК Компании".
🚀И мы поздравляем коллег не только с получением заслуженной награды, но и с достижениями в развитии цифровой культуры - системной и сложной работы.
В рамках торжественной церемонии награду получил Александр Афонин, директор департамента архитектуры и методологии работы с данными и Мезиров Азарий, директор департамента развития аналитики "Ритейл функции" X5 Tech
А еще мы подготовили для вас карточки с основными достижениями в цифровой культуре за последнее время🫳
Важно, что престижную награду получил не отдельный проект или направление работы с данными - мы победили в номинации "Цифровая культура". Вся многолетняя работа команды Тиграна Саркисова и X5 Tech в целом была собрана в проект "Цифровая культура как часть ДНК Компании".
🚀И мы поздравляем коллег не только с получением заслуженной награды, но и с достижениями в развитии цифровой культуры - системной и сложной работы.
В рамках торжественной церемонии награду получил Александр Афонин, директор департамента архитектуры и методологии работы с данными и Мезиров Азарий, директор департамента развития аналитики "Ритейл функции" X5 Tech
А еще мы подготовили для вас карточки с основными достижениями в цифровой культуре за последнее время🫳
🎉8👍5🥰1
❤️Что для вас Total Match?
И речь сейчас не о сайте знакомств, а об идеальном месте работы!
Команда управления продуктами «Подписка» и «X5 ID» стала участником проекта Эйч Teams, где топовые IT-компании рассказывают о себе на работе и вовне. Потенциальные сотрудники могут прочитать всё о культуре команды, пройти «тест на совместимость» и откликнуться на вакансии в компании, с которыми случился тот самый «Match».
У ребят из X5 Tech есть своя страничка, где они подробно рассказали о самом главном: каких ценностей и правил придерживается команда, в чем преимущества работы в X5 и как попасть в DreamTeam.
Заходите, смотрите фото, читайте наши посты и слушайте(да-да, командный!) плейлист!
И речь сейчас не о сайте знакомств, а об идеальном месте работы!
Команда управления продуктами «Подписка» и «X5 ID» стала участником проекта Эйч Teams, где топовые IT-компании рассказывают о себе на работе и вовне. Потенциальные сотрудники могут прочитать всё о культуре команды, пройти «тест на совместимость» и откликнуться на вакансии в компании, с которыми случился тот самый «Match».
У ребят из X5 Tech есть своя страничка, где они подробно рассказали о самом главном: каких ценностей и правил придерживается команда, в чем преимущества работы в X5 и как попасть в DreamTeam.
Заходите, смотрите фото, читайте наши посты и слушайте
❤7👍2🔥1
16 ноября прошёл наш третий митап по тестированию!
Поговорили про нагрузочное тестирование в банковской структуре, о том, как тестируется контрольно-кассовая техника, о применении GraphQL и многом другом.
• 632 человека смотрели онлайн-трансляцию;
• 59 вопросов задали спикерам;
• 1200+ просмотров записи встречи.
Если вы ещё не смотрели запись митапа, то самое время сделать это на нашем YouTube-канале, а также прочитать обзор на Habr.
Поговорили про нагрузочное тестирование в банковской структуре, о том, как тестируется контрольно-кассовая техника, о применении GraphQL и многом другом.
• 632 человека смотрели онлайн-трансляцию;
• 59 вопросов задали спикерам;
• 1200+ просмотров записи встречи.
Если вы ещё не смотрели запись митапа, то самое время сделать это на нашем YouTube-канале, а также прочитать обзор на Habr.
🔥8🐳1
Привет!
Сегодня снова даем повод поставить лайк и сделать репост для друзей.
Традиционно делимся подборкой вакансий, чтобы найти своих 🤞#вакансияx5Tech
📨 Архитектор ИТ-решений: опыт в роли архитектора, разработчика ПО или ИС, знание основ API, Kubernetes/OpenShift, Kafka/RabbitMQ; понимание производственных процессов и принципов работы СУБД класса MPP, NoSql.
🧑🏽💻 DevOps middle/senior: опыт построения CI/CD-пайплайнов, работы с контейнерами (Docker) и понимание принципов построения отказоустойчивых систем.
📨 Старший консультант SAP PY: опыт внедрения/поддержки модулей SAP HCM; компетенции по настройке модуля расчета заработной платы, отчетности, проводок.
🧑🏽💻 TeamLead команды разработки (Python): опыт управления командой и понимание процессов CI/CD, хорошие знания Python и веб-фреймворков; опыт работы с СУБД (PostgreSQL /MySQL), Docker, Kafka/RabbitMQ.
Сегодня снова даем повод поставить лайк и сделать репост для друзей.
Традиционно делимся подборкой вакансий, чтобы найти своих 🤞#вакансияx5Tech
📨 Архитектор ИТ-решений: опыт в роли архитектора, разработчика ПО или ИС, знание основ API, Kubernetes/OpenShift, Kafka/RabbitMQ; понимание производственных процессов и принципов работы СУБД класса MPP, NoSql.
🧑🏽💻 DevOps middle/senior: опыт построения CI/CD-пайплайнов, работы с контейнерами (Docker) и понимание принципов построения отказоустойчивых систем.
📨 Старший консультант SAP PY: опыт внедрения/поддержки модулей SAP HCM; компетенции по настройке модуля расчета заработной платы, отчетности, проводок.
🧑🏽💻 TeamLead команды разработки (Python): опыт управления командой и понимание процессов CI/CD, хорошие знания Python и веб-фреймворков; опыт работы с СУБД (PostgreSQL /MySQL), Docker, Kafka/RabbitMQ.
👍9
«Пользователь должен быть абсолютно спокоен и уверен, что его данные используются по назначению»
🎙В новом эпизоде подкаста Data Therapy мы расскажем о том, как данные используются в онлайн и офлайн ритейле.
Вместе с нашими гостями — Михаилом Ярцевым, директором по стратегическому маркетингу торговой сети «Пятерочка» и Максимом Зениным, заместителем коммерческого директора по рекламным продуктам и инновациям VK — ответим на следующие вопросы:
- Как данные применяются в онлайн и оффлайн ритейле, диджитал пространстве, рекламе, коммуникации с клиентами?
- Как анализ больших данных помогает прогнозировать поведение клиентов, повышать продажи, выявлять мошенников, предотвращать аварии?
- Каким был ритейл 10 лет назад и какие изменения с ним происходят сегодня?
- Что должна делать компания, чтобы клиент не переживал за свои данные?
- Не приведет ли автоматизация к исчезновению экспертов?
- Зачем собирают обратную связь с пользователей и как используется эта информация?
Ведущий подкаста — Дмитрий Прусов
🎙В новом эпизоде подкаста Data Therapy мы расскажем о том, как данные используются в онлайн и офлайн ритейле.
Вместе с нашими гостями — Михаилом Ярцевым, директором по стратегическому маркетингу торговой сети «Пятерочка» и Максимом Зениным, заместителем коммерческого директора по рекламным продуктам и инновациям VK — ответим на следующие вопросы:
- Как данные применяются в онлайн и оффлайн ритейле, диджитал пространстве, рекламе, коммуникации с клиентами?
- Как анализ больших данных помогает прогнозировать поведение клиентов, повышать продажи, выявлять мошенников, предотвращать аварии?
- Каким был ритейл 10 лет назад и какие изменения с ним происходят сегодня?
- Что должна делать компания, чтобы клиент не переживал за свои данные?
- Не приведет ли автоматизация к исчезновению экспертов?
- Зачем собирают обратную связь с пользователей и как используется эта информация?
Ведущий подкаста — Дмитрий Прусов
👍8🔥4
Где все? На Highload, конечно
Это повод рассказать, кто выступает от нас сегодня и что мы еще готовим
💥24-25 ноября проходит HighLoad в Москве.
В первый день конференции выступят три спикера X5 Tech:
Ирина Блажина и Николай Зайцев с докладом «SSO-решение на 5 млн пользователей. Масштабирование от пилотного проекта до федерального уровня»
https://highload.ru/moscow/2022/abstracts/9611
Алексей Топчий расскажет «Как вынести расчет цен для 20 тысяч магазинов из SAP, чтобы сохранить 4 девятки»
https://highload.ru/moscow/2022/abstracts/9580
Мы и техтоки проводим на Highload😉
Это повод рассказать, кто выступает от нас сегодня и что мы еще готовим
💥24-25 ноября проходит HighLoad в Москве.
В первый день конференции выступят три спикера X5 Tech:
Ирина Блажина и Николай Зайцев с докладом «SSO-решение на 5 млн пользователей. Масштабирование от пилотного проекта до федерального уровня»
https://highload.ru/moscow/2022/abstracts/9611
Алексей Топчий расскажет «Как вынести расчет цен для 20 тысяч магазинов из SAP, чтобы сохранить 4 девятки»
https://highload.ru/moscow/2022/abstracts/9580
Мы и техтоки проводим на Highload😉
highload.ru
Ирина Блажина на HighLoad++ 2022
У нас было порядка 20 клиентских мобильных и веб-приложений с локальной аутентификацией, написанных разными командами со своими процессами и уязвимостями. Переключаться между приложениями было сложно, пользователям это не нравилось. Это привело к созданию…
🔥8❤🔥1
🗓️2-3 декабря пройдет SQA Days, старейшая конференция России по тестированию. На нем спикеры X5 Tech выступят с 4 докладами:
Владислав Григорьев расскажет про «Использование асинхронного кода для автотестов и нагрузочного тестирования»
https://sqadays.com/ru/talk/104616
Мария Снопок выступит с докладом «Вредные советы начинающим автоматизаторам» и расскажет, какие практики использовать не стоит!
https://sqadays.com/ru/talk/104546
Виктория Дежкина поделится опытом про «Метрики и артефакты продукта для подбора QA-специалистов в разрезе софт и хард скилов»
https://sqadays.com/ru/talk/104624
Денис Дубовой расскажет про опыт работы с матрицей компетенции, как оценить рост тестировщика и как провести горизонтальные переходы в компании, «Знаете ли вы что умеют ваши сотрудники?»
https://sqadays.com/ru/talk/104552
В перерывах между докладами мы проводим дискуссии с участниками
X5 Tech будет представлена и спикерами, и стендом: в X5 Tech библиотеке можно прочитать про технологии и продукты, с которыми работают наши тестировщики, и пройти квиз по книгам, выпив согревающего какао
Владислав Григорьев расскажет про «Использование асинхронного кода для автотестов и нагрузочного тестирования»
https://sqadays.com/ru/talk/104616
Мария Снопок выступит с докладом «Вредные советы начинающим автоматизаторам» и расскажет, какие практики использовать не стоит!
https://sqadays.com/ru/talk/104546
Виктория Дежкина поделится опытом про «Метрики и артефакты продукта для подбора QA-специалистов в разрезе софт и хард скилов»
https://sqadays.com/ru/talk/104624
Денис Дубовой расскажет про опыт работы с матрицей компетенции, как оценить рост тестировщика и как провести горизонтальные переходы в компании, «Знаете ли вы что умеют ваши сотрудники?»
https://sqadays.com/ru/talk/104552
В перерывах между докладами мы проводим дискуссии с участниками
X5 Tech будет представлена и спикерами, и стендом: в X5 Tech библиотеке можно прочитать про технологии и продукты, с которыми работают наши тестировщики, и пройти квиз по книгам, выпив согревающего какао
Sqadays
Использование асинхронного кода для автотестов и нагрузочного тестирования
Асинхронный подход уже давно стал нормой для разработчиков, но редко встречается среди тестировщиков, потому что считается более сложным. В реальности же текущий уровень развития инструментов позволяет с небольшими усилиями писать асинхронный код для автотестов…
🔥5👍1
Ребята из команды больших данных Х5 Tech поделились секретами о том, как должно выглядеть резюме от Junior-аналитика, чтобы на него обратили внимание.
Через коллег прошли сотни резюме и накопился большой опыт в отборе кандидатов на позицию начинающего аналитика.
Они решили объединить экспертизу и поделиться рекомендациями с теми, кто сейчас ищет работу своей мечты. В надежде, что это поможет как можно скорее встретиться с идеальным кандидатом уже в команде Big Data 😉
Читайте в нашем блоге на Хабре
Через коллег прошли сотни резюме и накопился большой опыт в отборе кандидатов на позицию начинающего аналитика.
Они решили объединить экспертизу и поделиться рекомендациями с теми, кто сейчас ищет работу своей мечты. В надежде, что это поможет как можно скорее встретиться с идеальным кандидатом уже в команде Big Data 😉
Читайте в нашем блоге на Хабре
Хабр
Как составить резюме Junior-аналитику, чтобы на него обратили внимание: секреты от Х5 Tech
Привет, Хабр! Авторы этой статьи работают в команде больших данных в Х5 Tech. Мы решили объединить в статье наш личный опыт отбора кандидатов на позицию начинающего аналитика и дать несколько...
👍11❤🔥1