Новая статья в блоге — «Сложности проектирования высоконагруженных систем»
Читайте в нашем блоге, как преодолеть сложности при проектировании highload-систем с помощью Tarantool.
Мы расскажем про подходы к использованию таких систем и работу с legacy. А также приведем примеры highload-систем из финансовой сферы, ритейла, телекоммуникаций, медицины и промышленности.
Читать статью
Читайте в нашем блоге, как преодолеть сложности при проектировании highload-систем с помощью Tarantool.
Мы расскажем про подходы к использованию таких систем и работу с legacy. А также приведем примеры highload-систем из финансовой сферы, ритейла, телекоммуникаций, медицины и промышленности.
Читать статью
👍4🤯2
Слушайте про Tarantool на бесплатной онлайн-конференции «Российские системы управления базами данных»
Завтра, 8 ноября, Руслан Галиев — менеджер продукта Tarantool DB — выступит на прямом эфире в сообществе экспертов по работе с базами данных.
Начало — в 11:00. Регистрируйтесь и подключайтесь по ссылке.
Основные темы конференции
🔹 Что происходит на российском рынке СУБД после ухода Oracle и Microsoft?
🔹 Какие СУБД разрабатываются в России?
🔹 Насколько зрелыми являются отечественные СУБД?
🔹 Что «под капотом» у российских СУБД? Опенсорс или проприетарные разработки?
🔹 Как обеспечивается кибербезопасность российских СУБД?
🔹 Как функционально отличаются российские СУБД?
Присоединяйтесь к просмотру.
Завтра, 8 ноября, Руслан Галиев — менеджер продукта Tarantool DB — выступит на прямом эфире в сообществе экспертов по работе с базами данных.
Начало — в 11:00. Регистрируйтесь и подключайтесь по ссылке.
Основные темы конференции
🔹 Что происходит на российском рынке СУБД после ухода Oracle и Microsoft?
🔹 Какие СУБД разрабатываются в России?
🔹 Насколько зрелыми являются отечественные СУБД?
🔹 Что «под капотом» у российских СУБД? Опенсорс или проприетарные разработки?
🔹 Как обеспечивается кибербезопасность российских СУБД?
🔹 Как функционально отличаются российские СУБД?
Присоединяйтесь к просмотру.
👍8🔥3👏2
👍1
5 статей про работу с данными в режиме реального времени
Привет!
Собрали недавно вышедшие статьи про обработку данных в реальном времени.
🔹 Кэширование и переход от Redis к Tarantool
Статья про быстрый доступ к данным и преимущества, которые дает возможность их обработки в реальном времени. Разбираем подходы к обеспечению быстрого доступа, переход от Redis к Tarantool, сложности перехода и их преодоление.
🔹 Кейсы антифрода и рекомендательной системы на базе Tarantool
Рассказываем про антифрод и важность быстрого принятия аргументированных бизнес-решений, а также про кейс поиска инструмента для выстраивания антифрод-системы и маркетинга в реальном времени.
🔹 Как организовать доступ к данным в real-time?
Статья о проектировании высоконагруженных ИТ-систем и трудностях при построении сервисов, работающих в режиме реального времени. Рассказываем о том, как компании справляются с ростом нагрузок и объема данных, а также о кейсах применения продуктов Tarantool для работы в real-time.
🔹 Как организовать анализ большого объема данных в реальном времени
Показываем, как Tarantool Column Store комбинирует преимущества разных типов хранения данных, технологий, протоколов и функций. И как обеспечивает при этом высокую эффективность аналитической обработки с производительностью до 1,5 миллиарда сканов в секунду на одно ядро.
🔹 Как Tarantool справляется с задачами Real-Time маркетинга
Статья о том, как технологии позволяют оперативно реагировать на действия клиента и своевременно отправлять ему релевантные маркетинговые сообщения. Рассказываем, как работает Real-Time маркетинг (RTM), какие результаты достигаются с его помощью, почему Tarantool — подходящее решение для задач RTM.
Подписаться на канал Tarantool News
Привет!
Собрали недавно вышедшие статьи про обработку данных в реальном времени.
🔹 Кэширование и переход от Redis к Tarantool
Статья про быстрый доступ к данным и преимущества, которые дает возможность их обработки в реальном времени. Разбираем подходы к обеспечению быстрого доступа, переход от Redis к Tarantool, сложности перехода и их преодоление.
🔹 Кейсы антифрода и рекомендательной системы на базе Tarantool
Рассказываем про антифрод и важность быстрого принятия аргументированных бизнес-решений, а также про кейс поиска инструмента для выстраивания антифрод-системы и маркетинга в реальном времени.
🔹 Как организовать доступ к данным в real-time?
Статья о проектировании высоконагруженных ИТ-систем и трудностях при построении сервисов, работающих в режиме реального времени. Рассказываем о том, как компании справляются с ростом нагрузок и объема данных, а также о кейсах применения продуктов Tarantool для работы в real-time.
🔹 Как организовать анализ большого объема данных в реальном времени
Показываем, как Tarantool Column Store комбинирует преимущества разных типов хранения данных, технологий, протоколов и функций. И как обеспечивает при этом высокую эффективность аналитической обработки с производительностью до 1,5 миллиарда сканов в секунду на одно ядро.
🔹 Как Tarantool справляется с задачами Real-Time маркетинга
Статья о том, как технологии позволяют оперативно реагировать на действия клиента и своевременно отправлять ему релевантные маркетинговые сообщения. Рассказываем, как работает Real-Time маркетинг (RTM), какие результаты достигаются с его помощью, почему Tarantool — подходящее решение для задач RTM.
Подписаться на канал Tarantool News
🔥3👍1
Вебинар Tarantool «Анализируем транзакции в реальном времени»
28 ноября в 16:00 мы проведем бесплатный вебинар. Покажем, как обрабатывать высокие транзакционные и аналитические нагрузки в гибридной in-memory СУБД.
В программе вебинара
🔹 Ускорение аналитических расчетов и аналитика на самых свежих данных с помощью HTAP-систем.
🔹 Основные архитектурные характеристики гибридных транзакционно-аналитических СУБД (HTAP).
🔹 Повышение отказоустойчивости транзакционно-аналитических решений, настройка под разные профили нагрузки и интеграция с другими компонентами ИТ-ландшафта.
Проведем демонстрацию возможностей продукта Tarantool Column Store в работе с объектами и данными. Поделимся опытом его применения при формировании отчетности в реальном времени и расчете агрегатов в антифрод-системах.
Спикеры
🔹 Руслан Галиев, менеджер продукта Tarantool Column Store.
🔹 Анна Фенюшина, архитектор Tarantool.
🔹 Олег Баранов, архитектор Tarantool.
Вебинар будет полезен архитекторам, дата-инженерам, DevOps-инженерам и разработчикам аналитических систем.
Регистрируйтесь, и мы пришлем вам ссылку на трансляцию в день мероприятия.
Зарегистрироваться
28 ноября в 16:00 мы проведем бесплатный вебинар. Покажем, как обрабатывать высокие транзакционные и аналитические нагрузки в гибридной in-memory СУБД.
В программе вебинара
🔹 Ускорение аналитических расчетов и аналитика на самых свежих данных с помощью HTAP-систем.
🔹 Основные архитектурные характеристики гибридных транзакционно-аналитических СУБД (HTAP).
🔹 Повышение отказоустойчивости транзакционно-аналитических решений, настройка под разные профили нагрузки и интеграция с другими компонентами ИТ-ландшафта.
Проведем демонстрацию возможностей продукта Tarantool Column Store в работе с объектами и данными. Поделимся опытом его применения при формировании отчетности в реальном времени и расчете агрегатов в антифрод-системах.
Спикеры
🔹 Руслан Галиев, менеджер продукта Tarantool Column Store.
🔹 Анна Фенюшина, архитектор Tarantool.
🔹 Олег Баранов, архитектор Tarantool.
Вебинар будет полезен архитекторам, дата-инженерам, DevOps-инженерам и разработчикам аналитических систем.
Регистрируйтесь, и мы пришлем вам ссылку на трансляцию в день мероприятия.
Зарегистрироваться
🔥6
В 16:00 начинаем трансляцию вебинара «Анализируем транзакции в реальном времени».
Присоединяйтесь по ссылке и задавайте вопросы спикерам.
Смотреть трансляцию
Присоединяйтесь по ссылке и задавайте вопросы спикерам.
Смотреть трансляцию
VK Видео
Анализируем транзакции в реальном времени
Вебинар Tarantool "Анализируем транзакции в реальном времени" Узнайте, как обрабатывать высокие транзакционные и аналитические нагрузки в одной гибридной (HTAP) in-memory СУБД, сохраняя производительность всех сценариев, - регистрируйтесь и подключайтесь…
🔥4
VK Tech вошел в список крупнейших разработчиков СУБД России
Привет!
VK Tech вошел в топ-5 списка поставщиков СУБД с крупнейшим объемом выручки. Провайдер поставляет СУБД Tarantool DB, Tarantool Graph DB и Tarantool Column Store.
🔹 Tarantool DB — коробочный продукт, разработанный на основе платформы NoSQL in-memory СУБД с протоколами доступа Redis и IPROTO. У этой СУБД удобная установка и настройка кластера за счет интеграции с инструментами CI/CD.
🔹 Tarantool Column Store — in-memory колоночная СУБД для транзакционно-аналитической обработки данных в режиме реального времени. Решение позволяет мгновенно выполнять аналитику на самых новых данных, а также уменьшать затраты на перенос и копирование транзакционных данных в DWH.
🔹 Tarantool Graph DB — графово-векторная база данных. Это высокоскоростное хранилище графов и векторов для анализа связей между данными в реальном времени. Tarantool Graph DB может анализировать графы с более чем 7 млрд связей и 100 млн вершин.
Читайте подробнее в обзоре рынке российских СУБД.
Читать
Привет!
VK Tech вошел в топ-5 списка поставщиков СУБД с крупнейшим объемом выручки. Провайдер поставляет СУБД Tarantool DB, Tarantool Graph DB и Tarantool Column Store.
🔹 Tarantool DB — коробочный продукт, разработанный на основе платформы NoSQL in-memory СУБД с протоколами доступа Redis и IPROTO. У этой СУБД удобная установка и настройка кластера за счет интеграции с инструментами CI/CD.
🔹 Tarantool Column Store — in-memory колоночная СУБД для транзакционно-аналитической обработки данных в режиме реального времени. Решение позволяет мгновенно выполнять аналитику на самых новых данных, а также уменьшать затраты на перенос и копирование транзакционных данных в DWH.
🔹 Tarantool Graph DB — графово-векторная база данных. Это высокоскоростное хранилище графов и векторов для анализа связей между данными в реальном времени. Tarantool Graph DB может анализировать графы с более чем 7 млрд связей и 100 млн вершин.
Читайте подробнее в обзоре рынке российских СУБД.
Читать
👍11👏2
Привет!
На прошлой неделе прошел Highload. Любим эту конференцию и стараемся готовить интересные активности для стенда Tarantool.
В этот раз предложили посетителям:
🔹 игру «Штурвал», в которой можно было почувствовать себя в роли middleware под высокими нагрузками — крутить штурвал, обрабатывать запросы и по пути собирать монеты;
🔹 архитектурную игру с заданием заполнить пропущенные компоненты схемы правильными сервисами Tarantool и набрать максимальное количество очков.
Наш коллега Максим Кокряшкин, программист в команде Tarantool, выступил с докладом:
— WebAssembly и хайлоад: история о том, как Tarantool стал полиглотом
Ставьте реакции, если были на нашем стенде или видели доклад Максима.
До встречи на новом Highload!
На прошлой неделе прошел Highload. Любим эту конференцию и стараемся готовить интересные активности для стенда Tarantool.
В этот раз предложили посетителям:
🔹 игру «Штурвал», в которой можно было почувствовать себя в роли middleware под высокими нагрузками — крутить штурвал, обрабатывать запросы и по пути собирать монеты;
🔹 архитектурную игру с заданием заполнить пропущенные компоненты схемы правильными сервисами Tarantool и набрать максимальное количество очков.
Наш коллега Максим Кокряшкин, программист в команде Tarantool, выступил с докладом:
— WebAssembly и хайлоад: история о том, как Tarantool стал полиглотом
Ставьте реакции, если были на нашем стенде или видели доклад Максима.
До встречи на новом Highload!
👍12
Руководство по построению коннекторов к СУБД на примере Tarantool
Иван Банников, ведущий разработчик команды Data Integration Team из экосистемы Tarantool, написал новую статью на Хабр. В ней он рассказывает о разработке драйверов на примере создания коннектора к Tarantool.
Читайте статью
В профиле Ивана на Хабре вы найдете ссылки на другие его статьи:
🔹 Tarantool: как избавиться от «зоопарка технологий» с помощью потоков событий,
🔹 Как объединить устройства с разными протоколами передачи данных на одной IoT-платформе,
🔹 Чем Tarantool круче Redis'а для IoT-сервисов.
Иван Банников, ведущий разработчик команды Data Integration Team из экосистемы Tarantool, написал новую статью на Хабр. В ней он рассказывает о разработке драйверов на примере создания коннектора к Tarantool.
Читайте статью
В профиле Ивана на Хабре вы найдете ссылки на другие его статьи:
🔹 Tarantool: как избавиться от «зоопарка технологий» с помощью потоков событий,
🔹 Как объединить устройства с разными протоколами передачи данных на одной IoT-платформе,
🔹 Чем Tarantool круче Redis'а для IoT-сервисов.
Хабр
Руководство по построению коннекторов к СУБД на примере Tarantool
В сложных ИТ-системах важны не только основные модули, но и механизмы их взаимодействия — коннекторы (они же драйверы). Например, без них сложно выстроить связь приложения с базой данных. Но закрыть...
👍2🔥2
💼 Бизнес-завтрак Tarantool и Авандок.CDP: «Эффективные данные — залог успеха во взаимодействии с клиентами»
Tarantool и Авандок.CDP приглашают на бизнес-завтрак 12 февраля, чтобы обсудить, как решать задачи производительности и масштабирования данных в высоконагруженных сценариях.
Поговорим о золотых профилях клиентов, быстром обновлении и доступе к данным, а также эффективной работе под высокой нагрузкой.
📍 Где: БЦ SkyLight (Ленинградский проспект, 39 стр. 79, Москва)
🕘 Когда: 12 февраля, 9:30 — 12:40
👥 Присоединяйтесь — регистрируйтесь прямо сейчас!
Зарегистрироваться
Tarantool и Авандок.CDP приглашают на бизнес-завтрак 12 февраля, чтобы обсудить, как решать задачи производительности и масштабирования данных в высоконагруженных сценариях.
Поговорим о золотых профилях клиентов, быстром обновлении и доступе к данным, а также эффективной работе под высокой нагрузкой.
📍 Где: БЦ SkyLight (Ленинградский проспект, 39 стр. 79, Москва)
🕘 Когда: 12 февраля, 9:30 — 12:40
👥 Присоединяйтесь — регистрируйтесь прямо сейчас!
Зарегистрироваться
👍2
Вебинар «Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC»
Узнайте, как работать с инструментом near real-time репликации данных Tarantool CDC (Change Data Capture). Разберем проблемы роста нагрузки на core-системы при цифровой трансформации, низкой доступности данных разного формата из нескольких источников, отсутствия поддержки западных вендоров СУБД.
👉 Дата и время: 13 февраля, 15:00.
Основные темы вебинара:
🔹 Консистентность данных в ИТ-контуре
🔹 Мигрирация из проприетарных СУБД
🔹 Аналитическая отчетность
🔹 Кэш-витрины Tarantool для RTDM-сервисов
🔹 Двусторонняя репликация Tarantool ↔️ PostgreSQL
🔹 Синхронизация Tarantool с другими базами данных
🔹 Качество данных для ML и AI
Вебинар будет полезен:
🔹 архитекторам систем, работающим над интеграцией и управлением данными,
🔹 DevOps-инженерам, которые настраивают инфраструктуру обмена данными,
🔹менеджерам ИТ-проектов, заинтересованным в эффективности и надежности инфраструктуры.
👉 Зарегистрироваться
Узнайте, как работать с инструментом near real-time репликации данных Tarantool CDC (Change Data Capture). Разберем проблемы роста нагрузки на core-системы при цифровой трансформации, низкой доступности данных разного формата из нескольких источников, отсутствия поддержки западных вендоров СУБД.
👉 Дата и время: 13 февраля, 15:00.
Основные темы вебинара:
🔹 Консистентность данных в ИТ-контуре
🔹 Мигрирация из проприетарных СУБД
🔹 Аналитическая отчетность
🔹 Кэш-витрины Tarantool для RTDM-сервисов
🔹 Двусторонняя репликация Tarantool ↔️ PostgreSQL
🔹 Синхронизация Tarantool с другими базами данных
🔹 Качество данных для ML и AI
Вебинар будет полезен:
🔹 архитекторам систем, работающим над интеграцией и управлением данными,
🔹 DevOps-инженерам, которые настраивают инфраструктуру обмена данными,
🔹менеджерам ИТ-проектов, заинтересованным в эффективности и надежности инфраструктуры.
👉 Зарегистрироваться
👍3🔥3
Привет от команды Big Data Services VK Cloud!
Завтра, 11 февраля в 17:00, наши коллеги расскажут, что такое Data Lakehouse. Узнаем, как эта архитектура объединяет преимущества DLH и DWH, чтобы упростить управление, удешевить хранение и ускорить анализ данных из различных источников в одном месте.
На примере в лайв-режиме покажем различия в стоимости и скорости работы DLH и DWH.
Смотрите программу по ссылке ниже, приходите и задавайте вопросы.
Подробности и регистрация
Завтра, 11 февраля в 17:00, наши коллеги расскажут, что такое Data Lakehouse. Узнаем, как эта архитектура объединяет преимущества DLH и DWH, чтобы упростить управление, удешевить хранение и ускорить анализ данных из различных источников в одном месте.
На примере в лайв-режиме покажем различия в стоимости и скорости работы DLH и DWH.
Смотрите программу по ссылке ниже, приходите и задавайте вопросы.
Подробности и регистрация
👍4
Tarantool News
Вебинар «Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC» Узнайте, как работать с инструментом near real-time репликации данных Tarantool CDC (Change Data Capture). Разберем проблемы роста нагрузки на core-системы при цифровой…
Через 15 минут начинаем вебинар «Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC».
Присоединяйтесь по ссылке
Присоединяйтесь по ссылке
VK Видео
Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC
На вебинаре мы расскажем, как работать с инструментом near real-time репликации данных Tarantool CDC (Change Data Capture). Вы узнаете, как решать следующие задачи: - повысить консистентность данных в ИТ-контуре, - мигрировать из проприетарных СУБД (в…
🔥5
Статья и видео про Tarantool CDC
В статье на Хабре Евгений Афанасьев, архитектор VK Tech в команде Tarantool, рассказал о том, с какими вызовами сталкиваются современные компании при работе с данными и как на них помогает отвечать Tarantool CDC.
Вы узнаете:
🔹 Как связать разрозненные хранилища данных, не перегружая ИТ-систему.
🔹 Почему стандартные CDC-инструменты не всегда отвечают требованиям бизнеса.
🔹 И ещё много полезного про real-time-репликацию без нагрузки на БД-источник, поддержку PostgreSQL и Oracle, отказоустойчивость, порог входа в работу и многое другое с описанием конкретных решений.
Читать статью
➜ Больше про Tarantool CDC смотрите в записи вебинара «Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC»
В статье на Хабре Евгений Афанасьев, архитектор VK Tech в команде Tarantool, рассказал о том, с какими вызовами сталкиваются современные компании при работе с данными и как на них помогает отвечать Tarantool CDC.
Вы узнаете:
🔹 Как связать разрозненные хранилища данных, не перегружая ИТ-систему.
🔹 Почему стандартные CDC-инструменты не всегда отвечают требованиям бизнеса.
🔹 И ещё много полезного про real-time-репликацию без нагрузки на БД-источник, поддержку PostgreSQL и Oracle, отказоустойчивость, порог входа в работу и многое другое с описанием конкретных решений.
Читать статью
➜ Больше про Tarantool CDC смотрите в записи вебинара «Как консолидировать данные из разрозненных хранилищ с помощью Tarantool CDC»
👍5❤2🔥2
Как «Ростелеком» построил новую архитектуру личного кабинета с помощью Tarantool
«Ростелеком» — крупнейший провайдер цифровых услуг в России. Миллионы абонентов ежедневно используют личный кабинет для оплаты, подключения и управления сервисами. Личный кабинет работал на Oracle более 10 лет. Изменения потребовались из-за роста нагрузки на систему.
Требования
🔹 Перейти на российское ПО из реестра Минцифры.
🔹 Построить новую архитектуру и перевести систему из монолита на микросервисы.
🔹 Найти in-memory хранилище для сессий и авторизационных данных.
Решение
Команды Tarantool и «Ростелекома» совместно проработали техническую архитектуру и топологию решения. Новую архитектуру построили на коробочной NoSQL-базе данных Tarantool DB с готовыми прикладными модулями и функциями.
После развёртывания инфраструктуры эксперты из команды Tarantool продолжили сопровождать сервис — помогли с переходом на свежие версии Tarantool с фреймворками для Spring Boot, внедрили мониторинг с готовыми дашбордами для Grafana.
Результаты
🔹 Перенос кэша миллионов сессий.
🔹 Бесшовный переход на российскую технологию с полным сохранением данных.
🔹 Переход на микросервисную архитектуру, удобная работа с Kubernetes.
Читать кейс
«Ростелеком» — крупнейший провайдер цифровых услуг в России. Миллионы абонентов ежедневно используют личный кабинет для оплаты, подключения и управления сервисами. Личный кабинет работал на Oracle более 10 лет. Изменения потребовались из-за роста нагрузки на систему.
Требования
🔹 Перейти на российское ПО из реестра Минцифры.
🔹 Построить новую архитектуру и перевести систему из монолита на микросервисы.
🔹 Найти in-memory хранилище для сессий и авторизационных данных.
Решение
Команды Tarantool и «Ростелекома» совместно проработали техническую архитектуру и топологию решения. Новую архитектуру построили на коробочной NoSQL-базе данных Tarantool DB с готовыми прикладными модулями и функциями.
После развёртывания инфраструктуры эксперты из команды Tarantool продолжили сопровождать сервис — помогли с переходом на свежие версии Tarantool с фреймворками для Spring Boot, внедрили мониторинг с готовыми дашбордами для Grafana.
Результаты
🔹 Перенос кэша миллионов сессий.
🔹 Бесшовный переход на российскую технологию с полным сохранением данных.
🔹 Переход на микросервисную архитектуру, удобная работа с Kubernetes.
Читать кейс
👍7❤3🔥1
Живая встреча «Технические возможности Tarantool для задач бизнеса, работы с данными, аналитики и хранения»
27 февраля мы проведем встречу для знакомства, общения и обсуждения работы с ПО Tarantool. От команды Tarantool будут технические специалисты, архитекторы и менеджеры по работе с клиентами.
Когда: 27 февраля, 16:30 – 19:30.
Где: офис VK Tech, БЦ Алкон, 3 этаж, Ленинградский просп., 72, корп. 1 (метро «Сокол»).
В программе:
🔹 Будущее дата-сервисов VK Tech: технологии, стратегия, перспектива.
🔹 От события до BI: как TCS решает задачи операционной аналитики.
🔹 Vinyl в Tarantool: эффективное хранение данных на диске.
🔹 От in-memory к платформенной экосистеме: эволюция Tarantool 3.0.
🔹 Ответы на вопросы и неформальное общение.
Подробности и регистрация
27 февраля мы проведем встречу для знакомства, общения и обсуждения работы с ПО Tarantool. От команды Tarantool будут технические специалисты, архитекторы и менеджеры по работе с клиентами.
Когда: 27 февраля, 16:30 – 19:30.
Где: офис VK Tech, БЦ Алкон, 3 этаж, Ленинградский просп., 72, корп. 1 (метро «Сокол»).
В программе:
🔹 Будущее дата-сервисов VK Tech: технологии, стратегия, перспектива.
🔹 От события до BI: как TCS решает задачи операционной аналитики.
🔹 Vinyl в Tarantool: эффективное хранение данных на диске.
🔹 От in-memory к платформенной экосистеме: эволюция Tarantool 3.0.
🔹 Ответы на вопросы и неформальное общение.
Подробности и регистрация
🔥5
Кэшируем поток данных из Kafka в Tarantool: пример реализации с кодом
Кэшировать или не кэшировать — вот в чем вопрос. На самом деле, здесь есть правильный ответ. Кэширование потоков данных помогает разгрузить Kafka и ускорить обработку запросов. Кроме этого, кэш можно использовать для поддержки консистентности данных.
Никита Молоствов, старший программист команды разработки VK Tech, написал инструкцию по настройке взаимодействия Kafka и Tarantool с полезными ссылками и примерами кода, чтобы каждый мог применить его опыт на практике.
Что внутри
🔹 Собираем приложение на Golang для чтения потока из Kafka.
🔹 Проверяем вариант с синхронным чтением сообщений и коммитом Kafka после загрузки данных в Tarantool.
🔹 Проводим нагрузочное тестирование с помощью k6, оптимизированного для работы с Tarantool.
🔹 Посмотрим на разницу RPS с учетом реплик.
Читайте статью на Хабре
Кэшировать или не кэшировать — вот в чем вопрос. На самом деле, здесь есть правильный ответ. Кэширование потоков данных помогает разгрузить Kafka и ускорить обработку запросов. Кроме этого, кэш можно использовать для поддержки консистентности данных.
Никита Молоствов, старший программист команды разработки VK Tech, написал инструкцию по настройке взаимодействия Kafka и Tarantool с полезными ссылками и примерами кода, чтобы каждый мог применить его опыт на практике.
Что внутри
🔹 Собираем приложение на Golang для чтения потока из Kafka.
🔹 Проверяем вариант с синхронным чтением сообщений и коммитом Kafka после загрузки данных в Tarantool.
🔹 Проводим нагрузочное тестирование с помощью k6, оптимизированного для работы с Tarantool.
🔹 Посмотрим на разницу RPS с учетом реплик.
Читайте статью на Хабре
👍5❤3🔥3