Продуктовая линейка Data Sapience: Kolmogorov AI ⚙️
Kolmogorov AI — платформа платформа аналитики данных, машинного обучения и MLOps. Объединяет и синхронизирует процессы подразделений Data Engineer, Data Science, DevOps и Business. Платформа поддерживает моделирование полного цикла: от постановки задачи, подготовки данных до продуктивизации и эксплуатации моделей.
В семейство входят 4 продукта:
▪️Kolmogorov ABacus
Open source фреймворк, который включает в себя универсальные инструменты для различных стадий ЖЦ-экспериментов, таких как планирование эксперимента, определение размера выборки, оценка результатов, визуализация и отчетность;
▪️Kolmogorov Axiom
Решение класса Feature Store для создания, хранения и переиспользования аналитических признаков. Все данные для аналитики и работы с ML-моделями — в едином каталоге. Позволяет управлять переменными для построения моделей, каталогизировать фичи и строить наборы данных из интерфейса;
▪️Kolmogorov Continuity
Инструмент класса Decision Ops. Вся информация о моделях, аналитических проектах и артефактах доступна клиенту в общем реестре. Продукт позволяет гибко управлять рабочими процессами: автоматизировать их построение, управлять жизненным циклом и реализовывать любую методологию;
▪️Kolmogorov Predicate
Инструмент для мониторинга и валидации моделей машинного обучения. Все метрики и отчеты — в одном месте. Клиент может использовать встроенные метрики и дашборды, которые были созданы на основе более чем 10-летнего опыта решения задач DS/ML. Либо создавать собственные варианты, каждый из которых каталогизируется и превращается в шаблон.
Развернуть решение можно как в форматах cloud-native, on-prem, так гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
Kolmogorov AI — платформа платформа аналитики данных, машинного обучения и MLOps. Объединяет и синхронизирует процессы подразделений Data Engineer, Data Science, DevOps и Business. Платформа поддерживает моделирование полного цикла: от постановки задачи, подготовки данных до продуктивизации и эксплуатации моделей.
В семейство входят 4 продукта:
▪️Kolmogorov ABacus
Open source фреймворк, который включает в себя универсальные инструменты для различных стадий ЖЦ-экспериментов, таких как планирование эксперимента, определение размера выборки, оценка результатов, визуализация и отчетность;
▪️Kolmogorov Axiom
Решение класса Feature Store для создания, хранения и переиспользования аналитических признаков. Все данные для аналитики и работы с ML-моделями — в едином каталоге. Позволяет управлять переменными для построения моделей, каталогизировать фичи и строить наборы данных из интерфейса;
▪️Kolmogorov Continuity
Инструмент класса Decision Ops. Вся информация о моделях, аналитических проектах и артефактах доступна клиенту в общем реестре. Продукт позволяет гибко управлять рабочими процессами: автоматизировать их построение, управлять жизненным циклом и реализовывать любую методологию;
▪️Kolmogorov Predicate
Инструмент для мониторинга и валидации моделей машинного обучения. Все метрики и отчеты — в одном месте. Клиент может использовать встроенные метрики и дашборды, которые были созданы на основе более чем 10-летнего опыта решения задач DS/ML. Либо создавать собственные варианты, каждый из которых каталогизируется и превращается в шаблон.
Развернуть решение можно как в форматах cloud-native, on-prem, так гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
⚡4❤2👍2
Продуктовая линейка Data Sapience: Data Ocean Governance 📊
Data Ocean Governance — платформа управления данными организации. Продукты, входящие в линейку, позволяют автоматизировать процессы и обеспечить эффективное решение задач в области управления данными.
В семейство входят 4 продукта:
▪️Data Ocean Governance EMM
Решение для управления метаданными и качеством данных. Совмещает в себе функционал каталога данных и бизнес-глоссария, предоставляя широкий спектр возможностей по ведению любых типов метаданных с максимальной адаптацией под бизнес-процессы компании;
▪️Data Ocean Governance DQ
Универсальное решение для управления качеством данных любой сложности. Отвечает за управление дата-контрактами и инцидентами по качеству данных. В случае интеграции с DOG.EMM отслеживает уровень качества данных для метрик, отчетов, витрин;
▪️Data Ocean Governance MDM
Высокопроизводительное решение для очистки, обогащения, стандартизации и дедубликации клиентских данных. Отвечает за формирование и поддержку «золотой записи». Операционный и аналитический режимы работы клиентского MDM со свободным расширением модели данных и бизнес-логики;
▪️Ingresso One
Модуль для управления нормативно-справочной информацией. Отвечает за организацию и автоматизацию работы со справочными (НСИ) и пользовательскими данными, централизованный сбор, каталогизацию, корректировку, проверку качества и доставку данных до места целевого использования и принятия решений.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
Data Ocean Governance — платформа управления данными организации. Продукты, входящие в линейку, позволяют автоматизировать процессы и обеспечить эффективное решение задач в области управления данными.
В семейство входят 4 продукта:
▪️Data Ocean Governance EMM
Решение для управления метаданными и качеством данных. Совмещает в себе функционал каталога данных и бизнес-глоссария, предоставляя широкий спектр возможностей по ведению любых типов метаданных с максимальной адаптацией под бизнес-процессы компании;
▪️Data Ocean Governance DQ
Универсальное решение для управления качеством данных любой сложности. Отвечает за управление дата-контрактами и инцидентами по качеству данных. В случае интеграции с DOG.EMM отслеживает уровень качества данных для метрик, отчетов, витрин;
▪️Data Ocean Governance MDM
Высокопроизводительное решение для очистки, обогащения, стандартизации и дедубликации клиентских данных. Отвечает за формирование и поддержку «золотой записи». Операционный и аналитический режимы работы клиентского MDM со свободным расширением модели данных и бизнес-логики;
▪️Ingresso One
Модуль для управления нормативно-справочной информацией. Отвечает за организацию и автоматизацию работы со справочными (НСИ) и пользовательскими данными, централизованный сбор, каталогизацию, корректировку, проверку качества и доставку данных до места целевого использования и принятия решений.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥13👍6⚡3👏1
Продуктовая линейка Data Sapience: TALYS Ocean 💱
TALYS Ocean — платформа интегрированного управления рисками. Позволяет автоматизировать принятие решений. Пользователь может создавать стратегии на основе данных, собранных из различных источников, и управлять ими в едином интерфейсе.
В семейство входят 4 продукта:
▪️TALYS.SDE
Онлайн-движок для принятия решений. Позволяет управлять кредитными и другими видами рисков, рассчитывать сложные агрегированные показатели, получать и обрабатывать информацию из хранилищ данных и внешних сервисов, а также применять аналитические модели в режиме реального времени;
▪️TALYS.AML
Решение для автоматизации задач ПОД/ФТ и связанного комплаенса. Позволяет осуществлять офлайн- и онлайн-контроль в единой системе кейс-менеджмента. Отвечает за обязательный контроль и выявление сомнительных операций, позволяет расследовать полученные инциденты в едином интерфейсе и подготавливать регуляторную отчетность;
▪️TALYS.OpRisk
Модуль для автоматизации управления операционными рисками по 716-П на базе платформы Security Vision. Обеспечивает полное соответствие регуляторным требованиям. Минимизирует операционные риски и автоматически формирует отчетность для Банка России. Гибкая настройка под бизнес-процессы клиента: адаптация к специфике банка без привлечения разработчиков;
▪️TALYS.Motor
Решение для аналитической сегментации ОСАГО. Готовая стратегия сегментации входящего потока котировок с гарантированным SLA. ИИ «под капотом» для индивидуальной оценки риска по полису на основе истории страхователя. Использует данных НСИС для максимально точной оценки рисков.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
TALYS Ocean — платформа интегрированного управления рисками. Позволяет автоматизировать принятие решений. Пользователь может создавать стратегии на основе данных, собранных из различных источников, и управлять ими в едином интерфейсе.
В семейство входят 4 продукта:
▪️TALYS.SDE
Онлайн-движок для принятия решений. Позволяет управлять кредитными и другими видами рисков, рассчитывать сложные агрегированные показатели, получать и обрабатывать информацию из хранилищ данных и внешних сервисов, а также применять аналитические модели в режиме реального времени;
▪️TALYS.AML
Решение для автоматизации задач ПОД/ФТ и связанного комплаенса. Позволяет осуществлять офлайн- и онлайн-контроль в единой системе кейс-менеджмента. Отвечает за обязательный контроль и выявление сомнительных операций, позволяет расследовать полученные инциденты в едином интерфейсе и подготавливать регуляторную отчетность;
▪️TALYS.OpRisk
Модуль для автоматизации управления операционными рисками по 716-П на базе платформы Security Vision. Обеспечивает полное соответствие регуляторным требованиям. Минимизирует операционные риски и автоматически формирует отчетность для Банка России. Гибкая настройка под бизнес-процессы клиента: адаптация к специфике банка без привлечения разработчиков;
▪️TALYS.Motor
Решение для аналитической сегментации ОСАГО. Готовая стратегия сегментации входящего потока котировок с гарантированным SLA. ИИ «под капотом» для индивидуальной оценки риска по полису на основе истории страхователя. Использует данных НСИС для максимально точной оценки рисков.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4👍3⚡2❤2
Продуктовая линейка Data Sapience: Data Ocean 🌊
Data Ocean — cемейство IT-продуктов, которое решает задачи управления данными крупного бизнеса в современном стеке технологий. Объединяет концепции корпоративного хранилища и озера данных, а также позволяет максимально эффективно управлять масштабированием и экономикой data-проектов.
В семейство входят 3 продукта:
▪️Data Ocean Nova
Универсальная Lakehouse-платформа данных нового поколения. Решает комплексные задачи массивно-параллельной обработки данных. В том числе позволяет создавать и масштабировать оперативные слои данных в реальном времени, бесшовно работать с CRM- и ML-платформами, предоставлять федеративный доступ к базам данных и выступает в качестве виртуального хранилища. Дополнительно с помощью Data Ocean Cluster Manager пользователь может мониторить запросы и нагрузку от них, устанавливать, обновлять и конфигурировать кластеры, а также собирать метрики и строить дашборды;
▪️Data Ocean Flex Loader
Инструмент для пакетной репликации и интеграции данных. Гарантирует контроль качества данных, которые могут быть загружены как в полном, так и в инкрементальном режиме с захватом логических изменений. Отслеживает изменения источника данных с возможностью их автоматического применения на приемнике;
▪️Data Ocean SDI
Low-code инструмент для потоковой обработки и репликации данных. Обеспечивает real-time управление данными с реализацией необходимой бизнес-логики и преобразований. Поддерживает широкий набор трансформаций и обогащений данных для интеграции со сторонними сервисами. Работает в режиме захвата изменений в источниках для обеспечения real-time интеграций в аналитическое хранилище с минимальными задержками. Основная функциональность доступна через графический интерфейс с возможностью расширения за счет богатого набора API-интеграций.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
Data Ocean — cемейство IT-продуктов, которое решает задачи управления данными крупного бизнеса в современном стеке технологий. Объединяет концепции корпоративного хранилища и озера данных, а также позволяет максимально эффективно управлять масштабированием и экономикой data-проектов.
В семейство входят 3 продукта:
▪️Data Ocean Nova
Универсальная Lakehouse-платформа данных нового поколения. Решает комплексные задачи массивно-параллельной обработки данных. В том числе позволяет создавать и масштабировать оперативные слои данных в реальном времени, бесшовно работать с CRM- и ML-платформами, предоставлять федеративный доступ к базам данных и выступает в качестве виртуального хранилища. Дополнительно с помощью Data Ocean Cluster Manager пользователь может мониторить запросы и нагрузку от них, устанавливать, обновлять и конфигурировать кластеры, а также собирать метрики и строить дашборды;
▪️Data Ocean Flex Loader
Инструмент для пакетной репликации и интеграции данных. Гарантирует контроль качества данных, которые могут быть загружены как в полном, так и в инкрементальном режиме с захватом логических изменений. Отслеживает изменения источника данных с возможностью их автоматического применения на приемнике;
▪️Data Ocean SDI
Low-code инструмент для потоковой обработки и репликации данных. Обеспечивает real-time управление данными с реализацией необходимой бизнес-логики и преобразований. Поддерживает широкий набор трансформаций и обогащений данных для интеграции со сторонними сервисами. Работает в режиме захвата изменений в источниках для обеспечения real-time интеграций в аналитическое хранилище с минимальными задержками. Основная функциональность доступна через графический интерфейс с возможностью расширения за счет богатого набора API-интеграций.
Развернуть решение можно как в форматах cloud-native, on-prem, так и гибридно. Благодаря модульной архитектуре платформы в инфраструктуре клиента могут быть реализованы отдельные продукты под конкретные задачи.
🔥7👍4
Data Sapience представляет TALYS.Motor — новое решение для сегментации ОСАГО при помощи ИИ 🛞
TALYS.Motor, разработанный на базе продукта TALYS.SDE, объединяет автоматизацию обработки котировок ОСАГО, интеллектуальную online-сегментацию и индивидуальную оценку риска — всё в рамках единой платформы с фиксированным SLA и возможностью быстрого внедрения за 2-3 месяца.
🔹 Преимущества:
• Готовая стратегия для быстрого старта;
• ML-сегментация для автоматического распределения котировок;
• Быстрая интеграция с фронт-системой;
• Расширение клиентской базы за счет новых сегментов;
• Дополнительные данные для точной оценки рисков.
🔹 Ключевые особенности:
• No-code конструктор для создания рабочих процессов;
• Современная гибкая архитектура на docker-контейнерах;
• Возможность разграничения доступов с помощью ролей;
• Расширяемость с помощью языков программирования (Python, Java);
• Встроенный мониторинг для безопасности и прозрачности.
🔹 Финансовая эффективность:
• Низкая стоимость и быстрая окупаемость (9-12 месяцев);
• Масштабируемость для добавления новых стратегий.
TALYS.Motor, разработанный на базе продукта TALYS.SDE, объединяет автоматизацию обработки котировок ОСАГО, интеллектуальную online-сегментацию и индивидуальную оценку риска — всё в рамках единой платформы с фиксированным SLA и возможностью быстрого внедрения за 2-3 месяца.
🔹 Преимущества:
• Готовая стратегия для быстрого старта;
• ML-сегментация для автоматического распределения котировок;
• Быстрая интеграция с фронт-системой;
• Расширение клиентской базы за счет новых сегментов;
• Дополнительные данные для точной оценки рисков.
🔹 Ключевые особенности:
• No-code конструктор для создания рабочих процессов;
• Современная гибкая архитектура на docker-контейнерах;
• Возможность разграничения доступов с помощью ролей;
• Расширяемость с помощью языков программирования (Python, Java);
• Встроенный мониторинг для безопасности и прозрачности.
🔹 Финансовая эффективность:
• Низкая стоимость и быстрая окупаемость (9-12 месяцев);
• Масштабируемость для добавления новых стратегий.
«TALYS.Motor позволяет гибко дополнить имеющийся процесс принятия решений по котировкам ОСАГО, встроив обученную модель ИИ для индивидуальной оценки риска возникновения ущерба. Системное применение продукта на потоке входящих котировок может позволить существенно снизить уровень убыточности», — говорит Александр Брюханов, владелец продукта TALYS.Motor, Data Sapience.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥8⚡3❤1
Data Sapience выпустила очередное обновление Lakehouse-платформы Data Ocean Nova 🌊
В релизе 2025.6.0:
▫️завершена интеграция платформенных сервисов с процессинговым движком StarRocks;
▫️расширены возможности федеративных запросов;
▫️добавлена поддержка функционала Data Ocean Cluster Manager 2.1;
▫️завершены работы по интеграции сервиса YuniKorn, предназначенного для управления ресурсами Spark-приложений;
▫️расширены функциональные возможности платформенных сервисов и пользовательских приложений анализа данных.
Детальный список изменений релиза 2025.6.0. — на сайте платформы Data Ocean
В релизе 2025.6.0:
▫️завершена интеграция платформенных сервисов с процессинговым движком StarRocks;
▫️расширены возможности федеративных запросов;
▫️добавлена поддержка функционала Data Ocean Cluster Manager 2.1;
▫️завершены работы по интеграции сервиса YuniKorn, предназначенного для управления ресурсами Spark-приложений;
▫️расширены функциональные возможности платформенных сервисов и пользовательских приложений анализа данных.
Детальный список изменений релиза 2025.6.0. — на сайте платформы Data Ocean
❤8🔥5⚡3🐳1
🚀 Академия «ГлоуБайт»: Data Sapience открыла запись на курсы по работе с Data Ocean Nova и CM Ocean
Группа компаний GlowByte запустила сайт Академии «ГлоуБайт», где собраны 25 готовых курсов, в том числе по автоматизации CVM-маркетинга (CM Ocean) и работе с универсальной Lakehouse-платформой данных Data Ocean Nova. Курсы включают в себя как теорию, так и практические задания.
🌊 Блок «Data Ocean Nova» состоит из двух курсов:
⚫️ «Обучение пользователей»
Узнайте все об архитектуре, возможностях и преимуществах платформы. Научитесь оптимизировать аналитические запросы, разрабатывать ETL-процессы, решать практические задачи с помощью основных движков (Impala, Trino) и фреймворков (Spark), работать с S3 Storage и табличным форматом Iceberg;
⚫️ «Обучение администраторов»
Научитесь настраивать ролевой доступ, управлять конкурентной нагрузкой, отслеживать состояние инфраструктуры и решать типовые задачи. Познакомьтесь с возможностями решения Cluster Manager.
⚡️ Блок «Автоматизация CVM-маркетинга» включает курс:
⚫️ «Функциональные возможности платформы CM Ocean»
Научитесь управлять процессом создания кампаний и персонализированными коммуникациями. Сможете автоматизировать цикл работы CRM-подразделения, включая знакомство с продуктом, развитие клиента (cross-sell и up-sell кампании) и работу с оттоком.
Познакомиться с Академией «ГлоуБайт», почитать отзывы и узнать больше о курсах можно на сайте Академии🔥
Группа компаний GlowByte запустила сайт Академии «ГлоуБайт», где собраны 25 готовых курсов, в том числе по автоматизации CVM-маркетинга (CM Ocean) и работе с универсальной Lakehouse-платформой данных Data Ocean Nova. Курсы включают в себя как теорию, так и практические задания.
🌊 Блок «Data Ocean Nova» состоит из двух курсов:
Узнайте все об архитектуре, возможностях и преимуществах платформы. Научитесь оптимизировать аналитические запросы, разрабатывать ETL-процессы, решать практические задачи с помощью основных движков (Impala, Trino) и фреймворков (Spark), работать с S3 Storage и табличным форматом Iceberg;
Научитесь настраивать ролевой доступ, управлять конкурентной нагрузкой, отслеживать состояние инфраструктуры и решать типовые задачи. Познакомьтесь с возможностями решения Cluster Manager.
Научитесь управлять процессом создания кампаний и персонализированными коммуникациями. Сможете автоматизировать цикл работы CRM-подразделения, включая знакомство с продуктом, развитие клиента (cross-sell и up-sell кампании) и работу с оттоком.
Познакомиться с Академией «ГлоуБайт», почитать отзывы и узнать больше о курсах можно на сайте Академии🔥
Please open Telegram to view this post
VIEW IN TELEGRAM
❤4🔥4👏4⚡2
Евгений Вилков, Data Sapience: Data Ocean Nova — единственная в РФ универсальная Lakehouse-платформа с промышленными внедрениями 🌊
Технический руководитель решений Data Ocean Nova и Data Ocean Flex Loader Евгений Вилков дал интервью порталу TAdviser, где рассказал:
▫️Какие технологические решения стоят за успехом Lakehouse-платформы Data Ocean Nova (сегодня она используется в «Магните», «Ленте», «Альфа-Банке» и других крупнейших компаниях страны);
▫️За счет чего платформа работает в два раза быстрее open source решений и успешно конкурирует с Greenplum, Teradata и Oracle даже за пределами России;
▫️Почему ее создатели, команда вендора Data Sapience, уверены, что архитектура Lakehouse останется актуальной надолго.
🔗 Читать интервью
Технический руководитель решений Data Ocean Nova и Data Ocean Flex Loader Евгений Вилков дал интервью порталу TAdviser, где рассказал:
▫️Какие технологические решения стоят за успехом Lakehouse-платформы Data Ocean Nova (сегодня она используется в «Магните», «Ленте», «Альфа-Банке» и других крупнейших компаниях страны);
▫️За счет чего платформа работает в два раза быстрее open source решений и успешно конкурирует с Greenplum, Teradata и Oracle даже за пределами России;
▫️Почему ее создатели, команда вендора Data Sapience, уверены, что архитектура Lakehouse останется актуальной надолго.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥22❤2⚡1👍1
Data Sapience выпустила обновление решения Data Ocean Flex Loader 🌊
Новый релиз 2.6 направлен на расширение функциональных возможностей и повышение производительности.
Среди новых возможностей:
▫️Версии Data Ocean Flex Loader, предназначенные для работы с целевой платформой Greenplum, и версия для решений класса Hadoop и S3 Lakehouse теперь объединены в одну поставку;
▫️Реализован функционал синхронной загрузки данных из одного источника в два приемника, в том числе разнородных, например, Data Ocean Nova и Greenplum;
▫️Добавлена возможность использовать Native Object Storage как механизм чтения и извлечения данных из Teradata;
▫️Добавлена возможность использовать AI-функционал Data Ocean Nova для предсказания выделяемых заданию compute-ресурсов.
Полный список изменений релиза 2.6 — на сайте платформы Data Ocean
Новый релиз 2.6 направлен на расширение функциональных возможностей и повышение производительности.
Среди новых возможностей:
▫️Версии Data Ocean Flex Loader, предназначенные для работы с целевой платформой Greenplum, и версия для решений класса Hadoop и S3 Lakehouse теперь объединены в одну поставку;
▫️Реализован функционал синхронной загрузки данных из одного источника в два приемника, в том числе разнородных, например, Data Ocean Nova и Greenplum;
▫️Добавлена возможность использовать Native Object Storage как механизм чтения и извлечения данных из Teradata;
▫️Добавлена возможность использовать AI-функционал Data Ocean Nova для предсказания выделяемых заданию compute-ресурсов.
Полный список изменений релиза 2.6 — на сайте платформы Data Ocean
🔥11⚡3
Нагрузочное тестирование GP6 vs GP7 vs Cloudberry
▫️Насколько лучше производительность в GP7 и Cloudberry относительно GP6?
▫️Насколько стабильно работают GP7 и Cloudberry?
▫️Стоит ли мигрировать с GP6 в 2025? И если да, то на что?
Ответы на эти вопросы — в партнерском материале по нагрузочному тестированию GreenPlum 6.X, GreenPlum 7.X и Cloudberry ведущего архитектора группы компаний GlowByte Марка Лебедева.
Материал был анонсирован в статье «Тестирование систем и движков массивно-параллельных вычислений. Часть II. TPC-DS» и продолжает серию публикаций о нагрузочных тестированиях технического руководителя решений Data Ocean Nova и Data Ocean Flex Loader Евгения Вилкова.
▫️Насколько лучше производительность в GP7 и Cloudberry относительно GP6?
▫️Насколько стабильно работают GP7 и Cloudberry?
▫️Стоит ли мигрировать с GP6 в 2025? И если да, то на что?
Ответы на эти вопросы — в партнерском материале по нагрузочному тестированию GreenPlum 6.X, GreenPlum 7.X и Cloudberry ведущего архитектора группы компаний GlowByte Марка Лебедева.
Материал был анонсирован в статье «Тестирование систем и движков массивно-параллельных вычислений. Часть II. TPC-DS» и продолжает серию публикаций о нагрузочных тестированиях технического руководителя решений Data Ocean Nova и Data Ocean Flex Loader Евгения Вилкова.
🔥10❤2👍2⚡1
Java Agent как инструмент обхода лицензий: этичный анализ и защита
В блоге Data Sapience на Habr вышла новая статья.
В материале Сергей Капустин, тимлид бэкэнд-команды продукта Data Ocean Cluster Manager, исследует приложение Java‑агент, которое модифицирует код другого Java‑приложения «на лету» и создано для обхода лицензионных ограничений, а также рассматривает методы отслеживания несанкционированного вмешательства.
🔗 Читать полностью
В блоге Data Sapience на Habr вышла новая статья.
В материале Сергей Капустин, тимлид бэкэнд-команды продукта Data Ocean Cluster Manager, исследует приложение Java‑агент, которое модифицирует код другого Java‑приложения «на лету» и создано для обхода лицензионных ограничений, а также рассматривает методы отслеживания несанкционированного вмешательства.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7❤1
Проблема маленьких файлов. Оценка замедления S3 и проблем HDFS и Greenplum при работе с ними
В блоге Data Sapience на Habr вышла новая статья.
📝 В материале:
▫️Рассказываем о результатах исследования проблемы маленьких файлов в распределенных системах вычислений;
▫️Демонстрируем зависимость производительности от размера файла популярного решения объектного хранилища minIO;
▫️Сравниваем результаты с другими аналогичными тестированиями.
✅ Почему это важно:
Наглядно показываем, почему архитектурные решения HDFS и Greenplum не приспособлены к задачам интенсивной загрузки данных в реальном времени.
🔗 Читать полностью
В блоге Data Sapience на Habr вышла новая статья.
▫️Рассказываем о результатах исследования проблемы маленьких файлов в распределенных системах вычислений;
▫️Демонстрируем зависимость производительности от размера файла популярного решения объектного хранилища minIO;
▫️Сравниваем результаты с другими аналогичными тестированиями.
Наглядно показываем, почему архитектурные решения HDFS и Greenplum не приспособлены к задачам интенсивной загрузки данных в реальном времени.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11❤1👍1
Data Sapience приглашает на онлайн-конференцию «Kolmogorov Online Day» ⚙️
Эксперты Data Sapience раскроют секреты эффективного управления жизненным циклом моделей и расскажут, как увеличить отдачу от ML-инвестиций.
Дата: 18 сентября📆
Время: 16:00⏰
Формат: онлайн🌐
Что будет представлено:
▪️Достижения Kolmogorov AI: этапы развития, ключевые результаты;
▪️«Тессеракт» — обзор нового ПАКа для создания доверенных моделей ИИ;
▪️Срез практик MLOps — объективный взгляд на тренды и подводные камни, а также подходы к работе с AI от независимых экспертов;
▪️Демонстрация возможностей Kolmogorov AI для построения фабрики ИИ-агентов.
Вебинар будет полезен тем, кто хочет:
▪️Автоматизировать и ускорить вывод моделей в production;
▪️Наладить эффективный MLOps и перейти от экспериментов к промышленной эксплуатации;
▪️Найти подходящие инструменты и узнать об опыте создания надежной, масштабируемой и высокопроизводительной инфраструктуры для ML-моделей.
🔗 Зарегистрироваться на конференцию
Эксперты Data Sapience раскроют секреты эффективного управления жизненным циклом моделей и расскажут, как увеличить отдачу от ML-инвестиций.
Дата: 18 сентября
Время: 16:00
Формат: онлайн
Что будет представлено:
▪️Достижения Kolmogorov AI: этапы развития, ключевые результаты;
▪️«Тессеракт» — обзор нового ПАКа для создания доверенных моделей ИИ;
▪️Срез практик MLOps — объективный взгляд на тренды и подводные камни, а также подходы к работе с AI от независимых экспертов;
▪️Демонстрация возможностей Kolmogorov AI для построения фабрики ИИ-агентов.
Вебинар будет полезен тем, кто хочет:
▪️Автоматизировать и ускорить вывод моделей в production;
▪️Наладить эффективный MLOps и перейти от экспериментов к промышленной эксплуатации;
▪️Найти подходящие инструменты и узнать об опыте создания надежной, масштабируемой и высокопроизводительной инфраструктуры для ML-моделей.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5⚡2❤2
Data Sapience обновила курс «Data Ocean Nova. Обучение пользователей» 🌊
В программе обучения Академии «ГлоуБайт» по работе с универсальной Lakehouse-платформой данных Data Ocean Nova обновлен и значительно расширен блок, посвященный технологии распределенных вычислений Trino.
Обновленный блок в рамках курса «Data Ocean Nova. Обучение пользователей» позволит ознакомиться с:
▫️архитектурными особенностями Trino;
▫️областью эффективного применения движка в ландшафте Lakehouse-платформы;
▫️особенностями работы с табличным форматом Iceberg;
▫️работой UDF-функций.
Слушатели научатся:
▫️работать с внешними источниками данных;
▫️управлять параметрами сессии для максимальной производительности системы;
▫️работать с планом SQL-запроса и оптимизировать его исполнение;
▫️настраивать отказоустойчивый режим исполнения запросов.
Обучение предназначено для слушателей с любым уровнем подготовки и включает в себя большой объем теоретических знаний и практические занятия.
В программе обучения Академии «ГлоуБайт» по работе с универсальной Lakehouse-платформой данных Data Ocean Nova обновлен и значительно расширен блок, посвященный технологии распределенных вычислений Trino.
Обновленный блок в рамках курса «Data Ocean Nova. Обучение пользователей» позволит ознакомиться с:
▫️архитектурными особенностями Trino;
▫️областью эффективного применения движка в ландшафте Lakehouse-платформы;
▫️особенностями работы с табличным форматом Iceberg;
▫️работой UDF-функций.
Слушатели научатся:
▫️работать с внешними источниками данных;
▫️управлять параметрами сессии для максимальной производительности системы;
▫️работать с планом SQL-запроса и оптимизировать его исполнение;
▫️настраивать отказоустойчивый режим исполнения запросов.
Обучение предназначено для слушателей с любым уровнем подготовки и включает в себя большой объем теоретических знаний и практические занятия.
🔥10👍3
Forwarded from Экономика данных. Как это делается - OSP
🎯Грандиозное событие года в мире управления данными!
🔥24 сентября состоится Десятый юбилейный Форум «Управление данными»!
🔈Ключевой доклад от признанного эксперта отрасли!
💥Кирилл Евдокимов, директор практики Data Governance в ГК «ГлоуБайт», представит доклад «Каталог данных и управление изменениями».
Что вы узнаете:
✔️Как интеграция каталогов данных превращает риски в возможности
✔️Практические кейсы встраивания каталогов в процессы управления изменениями
✔️Реальные преимущества для бизнеса от внедрения современных решений
✔️Секреты минимизации человеческого фактора в управлении данными
Не упустите шанс:
👥Стать частью профессионального сообщества
🔁Обменяться опытом с лидерами отрасли
🗃️Получить инсайдерскую информацию от топовых экспертов
⚡️Регистрируйтесь прямо сейчас!
📱Присоединяйтесь к чату Форума для оперативного получения новостей и эксклюзивного контента!
#управлениеданными #data #форум #бизнес #технологии
🔥24 сентября состоится Десятый юбилейный Форум «Управление данными»!
🔈Ключевой доклад от признанного эксперта отрасли!
💥Кирилл Евдокимов, директор практики Data Governance в ГК «ГлоуБайт», представит доклад «Каталог данных и управление изменениями».
Что вы узнаете:
✔️Как интеграция каталогов данных превращает риски в возможности
✔️Практические кейсы встраивания каталогов в процессы управления изменениями
✔️Реальные преимущества для бизнеса от внедрения современных решений
✔️Секреты минимизации человеческого фактора в управлении данными
Не упустите шанс:
👥Стать частью профессионального сообщества
🔁Обменяться опытом с лидерами отрасли
🗃️Получить инсайдерскую информацию от топовых экспертов
⚡️Регистрируйтесь прямо сейчас!
📱Присоединяйтесь к чату Форума для оперативного получения новостей и эксклюзивного контента!
#управлениеданными #data #форум #бизнес #технологии
🔥8👏4⚡2
Forwarded from Экономика данных. Как это делается - OSP
🎉Юбилейный Форум «Управление данными 2025», 24 сентября, 2025, Москва + online
📣Представляем спикера форума:
🎤Михаил Маслов, руководитель разработки стратегии управления данными в компании Data Sapience
📖Тема выступления: «Внедрение MDM — важный шаг в борьбе за качество данных»
🗣️Что обсудим:
✔️Как обеспечить высокое качество клиентских данных в организации
✔️Особенности внедрения системы управления мастер-данными
✔️Эволюция бизнес-процессов и адаптация системы MDM
✔️Стратегическое значение MDM для развития бизнеса
❓Важные вопросы:
✔️Почему переход к MDM — это не просто техническая инициатива
✔️Как система управления данными поддерживает развитие бизнеса
✔️Какие изменения происходят в бизнес-логике при внедрении MDM
👉 Регистрируйтесь по ссылке
#управлениеданными #форум #бизнес #технологии #ИИ #data #digital #MDM #качестводанных
📣Представляем спикера форума:
🎤Михаил Маслов, руководитель разработки стратегии управления данными в компании Data Sapience
📖Тема выступления: «Внедрение MDM — важный шаг в борьбе за качество данных»
🗣️Что обсудим:
✔️Как обеспечить высокое качество клиентских данных в организации
✔️Особенности внедрения системы управления мастер-данными
✔️Эволюция бизнес-процессов и адаптация системы MDM
✔️Стратегическое значение MDM для развития бизнеса
❓Важные вопросы:
✔️Почему переход к MDM — это не просто техническая инициатива
✔️Как система управления данными поддерживает развитие бизнеса
✔️Какие изменения происходят в бизнес-логике при внедрении MDM
👉 Регистрируйтесь по ссылке
#управлениеданными #форум #бизнес #технологии #ИИ #data #digital #MDM #качестводанных
🔥13⚡3👍3❤2
«Группа Лента» и GlowByte внедрили оптимизатор на базе решения CM Ocean Optimum вендора Data Sapience 💬
Внедрение осуществлялось в сжатые сроки: от начала проекта до промышленной эксплуатации прошло 3 месяца.⌛️
Новая архитектура позволяет:
▪️выбирать подходящий оффер среди множества доступных в матрице релевантных предложений;
▪️определять канал доставки с учетом его пропускной способности и бюджета кампании.
Оптимизация time-to-market позволила достичь значимых результатов:
▪️на весь процесс, включая разделение больших данных на меньшие, решение оптимизационных задач, объединение и запись результата, теперь требуется не более 10 минут;
▪️база хранит информацию о 8 млн клиентов и 15 млн коммуникаций.
И это не является пределом, архитектура свободно масштабируется под необходимое количество данных. Решение способно выполнить оптимизационную задачу до 600 млн строк входных данных за 2,5 часа.
🔗 Читать подробнее о проекте на сайте Data Sapience
Внедрение осуществлялось в сжатые сроки: от начала проекта до промышленной эксплуатации прошло 3 месяца.
Новая архитектура позволяет:
▪️выбирать подходящий оффер среди множества доступных в матрице релевантных предложений;
▪️определять канал доставки с учетом его пропускной способности и бюджета кампании.
Оптимизация time-to-market позволила достичь значимых результатов:
▪️на весь процесс, включая разделение больших данных на меньшие, решение оптимизационных задач, объединение и запись результата, теперь требуется не более 10 минут;
▪️база хранит информацию о 8 млн клиентов и 15 млн коммуникаций.
И это не является пределом, архитектура свободно масштабируется под необходимое количество данных. Решение способно выполнить оптимизационную задачу до 600 млн строк входных данных за 2,5 часа.
«Индивидуальный подход к клиентам — основа современного бизнеса, поэтому автоматизация CVM-маркетинга стала для нас первостепенной задачей, а внедрение оптимизатора — логичным этапом в развитии компании. Всего за 3 месяца команда GlowByte смогла внедрить оптимизатор CM Ocean Optimum вендора Data Sapience, благодаря чему процесс подбора коммуникаций стал быстрым, понятным, а главное — эффективным. Теперь по каждому случаю мы получаем несколько вариантов релевантных предложений и каналов их доставки, при этом система учитывает все нужные бизнес-метрики и свободно масштабируется. Коммуникация с клиентами стала более продуктивной и прибыльной», — говорит Галина Кардаева, директор по маркетингу «Гипер Лента».
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥10👏7⚡4🎉1
Спикеры Kolmogorov Online Day: Владимир Анисимов и Артем Аксёнов
18 сентября в 16:10 в рамках Kolmogorov Online Day с докладом «Современный MLOPS: подходы и ограничения в крупных компаниях» выступят независимые эксперты Владимир Анисимов и Артем Аксёнов и расскажут об актуальных практиках MLOps в масштабных организациях.
Спикеры рассмотрят:
▪️подходы к внедрению машинного обучения;
▪️особенности масштабирования и ограничения ML-решений;
▪️практические аспекты построения MLOps-платформ.
18 сентября в 16:10 в рамках Kolmogorov Online Day с докладом «Современный MLOPS: подходы и ограничения в крупных компаниях» выступят независимые эксперты Владимир Анисимов и Артем Аксёнов и расскажут об актуальных практиках MLOps в масштабных организациях.
Спикеры рассмотрят:
▪️подходы к внедрению машинного обучения;
▪️особенности масштабирования и ограничения ML-решений;
▪️практические аспекты построения MLOps-платформ.
🔥4👏2
Спикеры Kolmogorov Online Day: Алексей Чирков и Илья Маршаков
18 сентября в 16:30 в рамках Kolmogorov Online Day с докладом «Тессеракт: власть над ИИ» выступят менеджер продукта Алексей Чирков (департамент развития искусственного интеллекта, ООО «РусБИТех — Астра») и руководитель развития бизнеса Kolmogorov Илья Маршаков (Data Sapience).
Создатели ПАКа для разработки и внедрения доверенных моделей ИИ «Тессеракт»:
▪️расскажут о новом решении;
▪️покажут, из чего оно состоит;
▪️обозначат список задач, которые ПАК способен закрыть.
18 сентября в 16:30 в рамках Kolmogorov Online Day с докладом «Тессеракт: власть над ИИ» выступят менеджер продукта Алексей Чирков (департамент развития искусственного интеллекта, ООО «РусБИТех — Астра») и руководитель развития бизнеса Kolmogorov Илья Маршаков (Data Sapience).
Создатели ПАКа для разработки и внедрения доверенных моделей ИИ «Тессеракт»:
▪️расскажут о новом решении;
▪️покажут, из чего оно состоит;
▪️обозначат список задач, которые ПАК способен закрыть.
🔥3👍1👏1
Спикеры Kolmogorov Online Day: Альфия Харламова
18 сентября в 16:50 в рамках Kolmogorov Online Day с докладом «Эволюция платформы Kolmogorov AI: результаты и направления развития» выступит старший аналитик Альфия Харламова (Data Sapience). Спикер расскажет об этапах развития платформы Kolmogorov AI за последний год: откуда начинали, чего достигли и куда планируем двигаться дальше.
В 17:10 состоится выступление Альфии «Kolmogorov AI: демонстрация возможностей для построения фабрики ИИ-агентов». Эксперт представит новую компоненту платформы, которая позволяет создавать, настраивать и масштабировать специализированных AI-агентов под любые бизнес-задачи.
18 сентября в 16:50 в рамках Kolmogorov Online Day с докладом «Эволюция платформы Kolmogorov AI: результаты и направления развития» выступит старший аналитик Альфия Харламова (Data Sapience). Спикер расскажет об этапах развития платформы Kolmogorov AI за последний год: откуда начинали, чего достигли и куда планируем двигаться дальше.
В 17:10 состоится выступление Альфии «Kolmogorov AI: демонстрация возможностей для построения фабрики ИИ-агентов». Эксперт представит новую компоненту платформы, которая позволяет создавать, настраивать и масштабировать специализированных AI-агентов под любые бизнес-задачи.
👍5🔥2💯1