BlogJava-xylz,imxylz-随笔分类-Jafka

分布式消息系统Jafka 发布1.2.0版本

imxylz — Tue, 26 Jun 2012 02:51:00 GMT

Jafka 是一个高性能的分布式消息系统。Jafka已经开源，使用github托管，主页地址：https://github.com/adyliu/jafka

Jafka 发布1.2.0版本，更新记录：

增加创建Topic的命令 Issues 4
增加监控Topic消费情况的工具 Issues 5
添加删除Topic的命令 Issues 7
忽略IntelliJ IDEA工程文件 Issues 6
支持密码验证某些操作 Issues 8
手动配置broker时支持默认分区数配置 Issues 9
重构发送消息的接口 Issues 10
添加一个默认发送字符串的消息发送者 Issues 11
添加生成完整完整包的脚本 Issues 12
添加一个导出字符串消息的脚本工具 Issues 13
修复消费自动分配（负载均衡）失败的问题 Issues 14

下载地址：https://github.com/adyliu/jafka/downloads
安装指南：https://github.com/adyliu/jafka/wiki/install.zh_CN
更多文档：https://github.com/adyliu/jafka/wiki

imxylz 2012-06-26 10:51 发表评论

分布式消息系统Jafka 发布1.1.0版本

imxylz — Sun, 27 May 2012 02:53:00 GMT

Jafka 是一个高性能的分布式消息系统。Jafka已经开源，使用github托管，主页地址：https://github.com/adyliu/jafka

Jafka 发布1.1.0版本，更新记录：

服务端：

增加 Java Service Wrapper 支持
默认的编码/解码调整为字节数组 2dbc332
增加服务端的mbean ServerInfo，描述版本信息，启动时间、运行时间等
增加getoffset-console.sh脚本，获取broker的偏移量
增加dumper工具，用于导出字符串消息
默认zookeeper 负载均衡重试时间调整为10s
将log4j.properties文件加入服务端CLASSPATH
增加简单安装文档 INSTALL
默认服务端配置不启用zookeeper
解决一些MBean重复注册问题
大部分IO关闭接口都继承自java.io.Closeable,并提供Closers工具类使用
大量的注释更新以及日志友好化
增加第三方依赖的LICENSE

客户端：

无消息消费时不更新offset f7d344f3
修复发送者无法收到新增加的topic分片信息问题https://github.com/adyliu/jafka/issues/2
消费消息时打开TCP NODELAY特性 a8b93d6b
升级zookeeper客户端为3.3.5版本，修复zookeeper bug(961,1091)

下载地址：

https://github.com/downloads/adyliu/jafka/jafka-1.1.0.tgz

imxylz 2012-05-27 10:53 发表评论

分布式消息系统jafka快速起步

imxylz — Fri, 11 May 2012 10:48:00 GMT

摘要: Jafka 是一个开源的/性能良好的分布式消息系统。在上一篇文章中有所简单介绍。下面是一篇简单的入门文档。更多详细的文档参考wiki。 Step 1: 下载最新的安装包完整的安装指南在这里。最新的发行版地址在：https://github.com/adyliu/jafka/downloads $wget https://github.com/downloads/adyliu/j... 阅读全文

imxylz 2012-05-11 18:48 发表评论

Jafka - 一个高性能的消息系统

imxylz — Thu, 10 May 2012 02:08:00 GMT

Jafka 是一个高性能的分布式消息系统。Jafka已经开源，使用github托管，主页地址：https://github.com/adyliu/jafka

Jafka 1.0版本已经发布，同步到Maven中央仓库。

Jafka是由Apache孵化的Kafka(由LinkedIn捐助给Apache）克隆而来。Jafka 1.0完整遵循Kafka 0.7的规范，几乎是Kafka的克隆版（有一些改进和调整）。
Jafka有几个吸引人的特性：

消息持久化非常快，服务端存储消息的开销为O(1)，并且基于文件系统，能够持久化TB级的消息而不损失性能
吞吐量很大，在我的单机DELL E6220（现已经停产）、Fedora 16 x86_64下单CPU内核运行，使用Jafka内置的python客户端，吞吐量能够达到300k/s
完全的分布式系统，broker、producer、consumer都原生自动支持分布式。自动实现复杂均衡。
内核非常小，整个系统（包括服务端和客户端）只有一个272KB的jar包，内部机制也不复杂，适合进行内嵌或者二次开发。整个服务端加上依赖组件共3.5MB。
消息格式以及通信机制非常简单，适合进行跨语言开发。目前自带的Python 3.x的客户端支持发送消息和接收消息。

另外，这里有一个分享的PPT资源。

Jafka guide

View more PowerPoint from Ady Liu

如果感兴趣，fork在github上的源码，进行二次开发或者按照自己喜欢的方式进行改进。如果有好的特性或者发现bug请友情提醒我。另外，友情支持淘宝内部使用的Kafka克隆版metaq,内部做了大量的改进和附加组件。如果你需要一个全功能的“复杂”系统，可以试试metaq.

imxylz 2012-05-10 10:08 发表评论