通过电子邮件获得 Hortonworks 的最新更新

每月一次,接收最新的洞察力、趋势、分析信息和大数据的知识。

Sign up for the Developers Newsletter

每月一次,接收最新的洞察力、趋势、分析信息和大数据的知识。

CTA

开始

云

是否已准备就绪?

下载 sandbox

我们能为您做什么?

关闭关闭按钮
CTA

通过物联网大数据最大程度发挥动态数据的价值

播放 视频按钮视频

Get Started with Hortonworks DataFlow

Download Now
Hortonworks DataFlow (HDF)

Hortonworks DataFlow (HDF)

Hortonworks DataFlow (HDF) 提供了唯一的端到端平台,利用直观的拖放界面,可以在内部或云中实时收集、管理、分析和操作数据。HDF 是 Apache Nifi/MiNifi、Apache Kafka、Apache Storm 和 Druid 中集成的解决方案。

The HDF streaming real-time data analytics platform includes data flow management systems, stream processing, and enterprise services.

为数据的未来保驾护航

HDF 3.1 Platform
Kafka Storm NiFi minifi Ranger Ambari

Hortonworks DataFlow 的三个主要组件

管理员

轻松、安全且可靠数据流管理方式 

安全且高效率地收集和操纵物联网大数据流,同时提供实时运营可见性、控制和管理。

管理员

即时和持续的洞察  

在几分钟内构建流分析以实时捕获稍瞬即逝的洞察,一行代码都不用写。

了解更多
管理员

公司治理、安全性和操作 

通过全面管理面板来管理 HDF 和 HDP 生态系统,以进行调配、监控和治理。

了解更多

与数据源无关的集成式收集平台

HDF 具备功能齐全的数据收集功能,这些功能对数据未知进行流式处理并且与超过 220 种处理程序集成。可以从不同格式、模式、协议、速度和大小以及各种类型(如机器、地理位置设备、点击流、文件、社交订阅源、日志文件和视频)的动态和分布式来源中收集物联网的大数据。

更多信息:

强大的数据收集

实时响应动态数据

通过 HDF,数据收集不再是一个乏味的过程。您可以使用一个直观的控制面板,明察秋毫地管理数据,以调解来源,连接和拆分流以及划分数据流的优先级。HDF 还可以向您的流中添加上下文数据,以获得更完整分析和洞察。始终在线数据溯源和审计跟踪根据需要实时提供了安全性和治理合规性和故障诊断。与 Apache NiFi、MiNiFi、Kafka 和 Storm 集成,HDF 可以处理大量事件以获得即时分析和操作。Kafka 允许区分数据创建和交付的速度,同时 Storm 以海量规模提供了流实时数据分析和即时洞察。

更多信息:

  • 流数据如何通过 Apache NiFi 实时可视用户界面提升运营效能。
    观看视频
实时数据流管理

从源到目标进行全面保护 

HDF 通过离散用户授权以及详细的实时可视化监管链来保护端到端数据流以及从源到目标的路由。使用 HDF 的直观用户界面来加密流数据,将数据路由到 Kafka,配置缓冲区以及管理堵塞,这样便可以动态划分数据优先级以及安全发送数据。HDF 支持基于角色的数据访问,可以动态和安全地分享相关数据片段。HDF 可以轻松在 kerberos 环境中部署流管理和串流应用程序,且不会过多运营开销。

更多信息:

  • 了解颗粒数据访问相比基于角色的访问有哪些优点
    观看视频
企业级安全性

无需编写代码即可构建流分析应用程序

HDF 包括完整的流分析模块,也就是流分析管理器 (SAM),可生成流分析应用程序来进行事件关联、上下文丰富、复杂模式匹配、分析聚合,并且在发现洞察时创建警报/通知。通过 SAM,应用程序开发者、开发运营人员和业务分析师可以轻松构建流分析,从而在几分钟之内构建、开发、协作、分析、部署和管理应用程序,且无需编写任何代码。分析师使用预先构建的图表可快速构建分析和创建仪表盘,而运营开发人员则可以以“开箱即用”的方式来监控和管理应用程序性能。

开发人员可以尝试使用模拟数据创建 SAM 应用程序,并使用新的 SAM“测试模式”为 SAM 应用程序创建单元测试。新的 SAM 操作模块使用户能够轻松地测试、调试、排查和监控已部署的应用程序,使运行的应用程序的操作与构建应用程序一样简单。

更多信息:

模式注册表的操作效率更高

HDF 包含模式注册表,这是一个中央模式存储库,让分析应用程序可以灵活地彼此交互。这使用户可以保存、编辑或检索其所需数据的模式。这还可以轻松在每个数据中附加模式,且无需额外开销即可提高运营效率。通过模式版本管理,数据使用者和数据生产者可以以不同速度进化。通过模式验证,数据质量也会极大提高。中央模式注册表可以保证数据使用方式的出色治理。模式注册表与 Apache Nifi 和 HDF 流分析管理器集成。

更多信息:

APACHE NIFI 注册表

Apache NiFi 注册表,是新的 Apache 子项目,包括在 HDF 企业管理服务中,简化了数据流的开发、管理和可移植性。它的功能核心是能够抽象数据流架构和程序,使用户能够跟踪和监控更为细致的数据流更改。数据流模式存储在共享存储库中,允许在全局基础上轻松共享,也可以对架构进行版本控制。

通过这一点,数据流的导出和导入允许轻松移植,并使数据流从一个环境顺利迁移到另一个环境。该功能显著改善了版本流的存储、控制和管理,进一步缩短了软件开发生命周期,加速了应用程序的部署,以更快的时间实现了价值。

HDF 的新功能

加快了数据流的管理、开发和操作

*

使用 Apache NiFi 注册表轻松地开发、管理和移植数据流

*

以更为细致的水平跟踪和监控数据流更改

*

使用数据流架构的共享存储库共享和对架构进行版本控制

*

从一个环境轻松地向另一个环境导出和导入数据流

提高开发人员效率

*

改善 Hortonworks Streaming Analytics Manager (SAM) 中的流数据操作

*

使用新的 SAM“测试模式”为 SAM 应用程序创建 SAM 应用程序和单元测试。

*

使用新的 SAM 操作模块测试、调试、排查和监控部署的应用程序

体验与 Kafka 1.0 的紧密集成

*

使用 Ambari 安装、配置、管理、升级、监控和保护 Kafka 1.0 群集

*

通过 Apache Ranger 管理访问控制策略来增强数据管理和沿袭

*

利用 NiFi 和 SAM 中的新处理器,使用 Kafka 1.0 功能,包括消息头和事务

HDF 用户指南

获取 HDF 发行说明;用户版、开发者版指南并开始使用。

支持

业内针对企业内部 Apache NiFi、Kafka 和 Storm 提供支持的最佳团队。请联系我们的专家团队,由他们指引您开启这段旅程。

培训

大数据专家提供的实时培训。可当面提供,也可在您需要的任何时候按需提供。