storm

     

质疑Lambda架构

9359 8 4K
Google和Twitter刚发布它们综合实时流处理和批处理的Lambda架构,LinkedIn的Jay Kreps则对这种架构提出了质疑,指出实时处理和批处理其实是两种范式,将它们硬生生捆绑在一起会.

kafka + storm 集成源码案例

10558 2 2K

kafka-storm-starter是一个展示如何实现Apache Kafka与Apache Storm的集成案例,使用Apache Avro作为数据序列化。运行$ ./sbt test可以对 Ka.

Twitter开源其MapReduce流框架: Summingbird

1212

summingbird是一个基于Apache2的开源项目,它是一个大规模数据系统,能够以批处理模式(Hadoop/MapReduce-based)或流模式(Storm-based)两者方式执行代码。T.

开源ScalaStorm

1008

velvia/ScalaStorm · GitHubscalaStorm提供一个基于Storm的Scala DSL,进行实时分布式计算,也提供开发Storm topology的Scala和SBT框架。.

Akka与Storm对比

4 5601 3

Akka vs Storm简短的描述一下这两个系统: Storm是一个分布式的,实时计算系统。在一个Storm集群中,通过执行的topology,实现处理tuples数据流。每个拓扑由Spout(产生.

Storm在spider.io应用的经验教训

1089

Storm at spider.io - London Stormspider.io 是一个为在线广告提供反恶意软件,反恶意点击的系统,其任务是如何从大量日志中发现广告舞弊点击以骗取广告费。spide.

用Netty 让Storm飞

2986 1
Making Storm fly with Netty | Yahoo Engineering最近测试表明,使用Netty替代ZeroMQ作为Storm的消息机制,性能提升两倍。关键原因是Netty是.