转载

分布式发布-订阅消息系统 Apache Kafka v0.10.0.1-rc2发布

分布式发布-订阅消息系统 Apache Kafka v0.10.0.1-rc2发布

Apache Kafka是分布式发布-订阅消息系统,原本开发自 LinkedIn,用作 LinkedIn 的活动流(Activity Stream)和运营数据处理管道(Pipeline)的基础。之后成为Apache项目的一部分。 现在它已被多家公司作为多种类型的数据管道和消息系统使用。活动流数据是几乎所有站点在对 其网站使用情况做报表时都要用到的数据中最常规的部分。Kafka是一种快速、可扩展的、设计内在就是分布式的,分区的和可复制的提交日志服务。

Apache Kafka与传统消息系统相比,有以下不同:

  • 它被设计为一个分布式系统,易于向外扩展;
  • 它同时为发布和订阅提供高吞吐量;
  • 它支持多订阅者,当失败时能自动平衡消费者;
  • 它将消息持久化到磁盘,因此可用于批量消费,例如ETL,以及实时应用程序。

分布式发布-订阅消息系统 Apache Kafka v0.10.0.1-rc2发布

下载

 

本站原创,转载时保留以下信息:
本文转自:深度开源(open-open.com)
原文地址:http://www.open-open.com/news/view/5f3cc21f
 

正文到此结束
Loading...