时事通讯

通过电子邮件获得 Hortonworks 的最新更新

每月一次,接收最新的洞察力、趋势、分析信息和大数据的知识。

AVAILABLE NEWSLETTERS:

Sign up for the Developers Newsletter

每月一次,接收最新的洞察力、趋势、分析信息和大数据的知识。

CTA

开始

云

是否已准备就绪?

下载 sandbox

我们能为您做什么?

* 我了解我可以随时取消预订。我也承认在 Hortonworks 隐私政策中发现的更多信息。
关闭关闭按钮
CTA

流消息管理器

获取对 Apache Kafka® 环境的端到端可见性

使用 SMM 管理和监控 Apache Kafka

了解更多

概述

Hortonworks Streams Messaging Manager (SMM) 是一种操作监控/管理工具,可在 Apache® Kafka® 企业环境中提供端到端可见性。使用 SMM:

  • 清晰了解您的 Kafka 群集。
  • 了解从生产者到主题再到消费者之消息流的端到端流程。
  • 对 Kafka 环境进行故障检修,以识别瓶颈、吞吐量、消费模式、流量等。
  • 使用各种过滤器分析生产者和消费者之间的流动态。
  • 根据从各种代理和主题收集的关键性能洞察,优化 Kafka 环境。
  • 通过 Apache Atlas 的紧密集成,利用强大的数据流可视化,获得跨多个 Kafka 跃点、生产者和消费者的完整数据沿袭。
查看数据表

优点

简化对 Kafka 环境的故障检修

Kafka 平台操作团队由于缺少可用的工具,在故障检修/监控 Kafka 环境方面存在困难。使用 SMM,他们会获得智能筛选,使用户能够选择生产者、代理、主题或消费者。SMM 足够智能,只显示向选定主题发送数据的生产者,且只显示从这些主题中消费的消费者组。筛选适用于选择四个实体中的任何一个。这使用户能够在故障检修和调试 Kafka 问题时快速找到根源。

博客:Hortonworks Streams Messaging Manager (SMM) 简介
简化对 Kafka 环境的故障检修
可视化端到端 Kafka 流式流程

SMM 的强大功能之一是它能够可视化全部 Kafka 群集中的所有数据流/流程。您可以选择任何实体(如生产者、消费者、代理或主题),并可视化所选实体的数据流程方式。

Kafka 开发运营团队可以获得以下优势

  • 了解从生产者到主题再到消费者之消息流的端到端流程
  • 使用各种过滤器分析生产者和消费者之间的流动态
博客:使用 Streams Messaging Manager 解决开发运营人员/开发者的需求
可视化端到端 Kafka 流式流程
从边缘到企业跟踪数据沿袭和治理

SMM 已经完全集成了 Apache Atlas 的治理和数据沿袭、Apache Ranger 的安全性和访问控制管理、Apache Ambari 的基础设施级别监控和群集的生命周期操作,以及 Grafana 随时间变化绘制 Kafka 指标的能力。单击 SMM 界面中的 Atlas 图标,即可使用 SMM 强大的数据流可视化功能来查看跨多个 Kafka 跃点的完整数据沿袭。如果 NiFi 是 Kafka 消息的使用者,那么就从该可视化视图跳转到实际的 Apache NiFi 流。

白皮书:使用 Hortonworks Streams Messaging Manager (SMM) 管理和监控 Apache Kafka
从边缘到企业跟踪数据沿袭和治理
使用 REST 扩展监控/管理功能

SMM 为其所有功能提供 REST 端点。监控/管理 REST API 通过 SMM REST 服务器实现。这使开发人员能够将 SMM 与其他企业工具(如 APM 或案例/工单系统)集成在一起。通常情况下,Kafka 开发人员很难深入到特定主题的消息级别。不过,有了 SMM,开发人员就可以使用可视界面或 REST API 来筛选和选择一个主题,并打开该主题中的所有消息。

文档:Streams Messaging Manager REST API
使用 REST 扩展监控/管理功能
采用混合云部署 Kafka

SMM 作为一款 DataPlane 平台应用而提供。这使得客户能够使用单个 SMM 实例在其组织中管理多个 Kafka 群集。您可以跨 Hortonworks Data Platform (HDP)Hortonworks DataFlow (HDF) 使用单个 SMM 示例管理多个 Kafka 群集。此外,考虑到 SMM 是一款 DataPlane 平台应用,这也有助于支持混合云部署。


文档:安装 Streams Messaging Manager