Управляемая потоковая передача Amazon для Apache Kafka
Надежная потоковая передача данных в полностью управляемом сервисе Apache Kafka высокой доступности
Что такое Amazon MSK?
Управляемая потоковая передача Amazon для Apache Kafka (Amazon MSK) — это сервис потоковой передачи данных для управления инфраструктурой и операциями Apache Kafka, с помощью которого разработчики и инженеры DevOps / платформы могут запускать приложения Apache Kafka и коннекторы Apache Kafka Connect на AWS без глубоких знаний по эксплуатации Apache Kafka. Amazon MSK управляет кластерами Apache Kafka, обслуживает и масштабирует их, а также предоставляет готовые функции безопасности корпоративного уровня и имеет встроенные интеграции AWS, ускоряющие разработку приложений потоковой передачи данных. Подробнее о том, как это работает.
Преимущества
Получите самую низкую цену за производительность рабочих нагрузок Apache Kafka с оплатой по мере использования. Брокеры Amazon MSK Express могут обеспечить до 3 раз большую пропускную способность для каждого брокера, масштабироваться до 20 раз быстрее и восстанавливаться на 90% быстрее по сравнению со стандартными брокерами Apache Kafka. Благодаря поддержке каждого брокера количество разделов в 5 раз больше, брокеры Express могут повысить соотношение цены и эффективности рабочих нагрузок, связанных с разделами, до 50%.
Обеспечьте устойчивость рабочих нагрузок Apache Kafka к потерям доступности и надежности с помощью развертывания в нескольких зонах доступности, а также благодаря автоматическому обнаружению, смягчению последствий и восстановлению инфраструктуры.
Снижайте операционные накладные расходы, в том числе затраты на подготовку, конфигурацию и обслуживание высокодоступных кластеров Apache Kafka и Kafka Connect.
С легкостью получайте данные из вышестоящих систем и доставляйте их в нижестоящие, используя полностью управляемую интеграцию без программирования с другими сервисами AWS или размещая коннекторы на полностью управляемом хостинге Kafka Connect.
Примеры использования
Собирайте события с помощью Amazon MSK и создавайте собственную логику потоковой обработки в блокнотах Apache Zeppelin, чтобы за миллисекунды получать представление о потоках данных.
Используйте структуру журналов Amazon MSK и Apache Kafka для формирования централизованных и общедоступных шин данных в режиме реального времени.
Получайте информацию о цифровых изменениях, происходящих в ваших приложениях и бизнес-инфраструктуре, и реагируйте на них в режиме реального времени.
