Apache Kafka 0.8.2-beta 发布,此版本引入了许多新特性,改进和 bug 修复: - 新 Java producer 实现,性能提升 - 支持删除 topic - 每个 topic 配置在可用的情况下尽量一致 - 支持 Scala 2.11,放弃对 Scala 2.8 的支持 - LZ4 Compression 更多内容请看:https://archive.apache.org/dist/kafka/0.8.2-beta/RELEASE_NOTES.html 下载:http://kafka.apache.org/downloads.html kafka是一种高吞吐量的分布式发布订阅消息系统,她有如下特性: 通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。 高吞吐量:即使是非常普通的硬件kafka也可以支持每秒数十万的消息。 支持通过kafka服务器和消费机集群来分区消息。 支持Hadoop并行数据加载。 卡夫卡的目的是提供一个发布订阅解决方案,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。kafka的目的是通过Hadoop的并行加载机 制来统一线上和离线的消息处理,也是为了通过集群机来提供实时的消费。 Apache Kafka 0.8.2-beta 发布下载地址