开源Apache Kafka

11-11-28 banq
Apache Kafka是一个分布式事件publish-subsribe消息系统,类似Facebook's Scribe的,Kafka最大特点就是吞吐量,应用在LinkedIn,作为活动流数据和操作的监测,以方便和离线分析系统OLAP如Hadoop集成。

其他应用:

Mate1.com Inc.主要使用其作为事件总线event bus增强新闻和活动资料服务,实时提醒和日志分发。

Tagged - 使用其实现pub sub系统,将游戏用户的实时事件进行传递。

Boundary - 聚合高吞吐量消息流进入一个统一的pubsub 服务, 是实时数据和其他离线分析系统的接口协调者。

DataSift - 使用其作为事件监测者和收集者,实时跟踪用户消费数据。

Wooga - 聚合处理所有来自facebook的数据。

Clearspring - 数据网络的事件收集者,实时数据和分析集群系统的中间衔接者。

         

猜你喜欢