storm

     

推特大规模应用的流处理框架:Apache Heron

1415 2K

Apache Heron是实时、分布式、容错的流处理引擎。自 2014 年以来,Heron 为 Twitter 的各种用例提供​​了所有实时分析的支持。事件报告下降了一个数量级,证明了经过验证的可靠性.

比Storm更快的Twitter Heron

1 3414 2
Tiwtter公布了其新型大数据实时处理架构Heron,Tiwtter每天数十亿的事件数据,过去主要使用Apache Storm进行分析处理,现在随着数据量增加等不断演进,他们设计了一个新的系统Her.

Storm与Spark Streaming比较

1 38810 20

Storm风暴和Spark Streaming火花流都是分布式流处理的开源框架。这里将它们进行比较并指出它们的重要的区别。处理模型,延迟虽然这两个框架都提供可扩展性和容错性,它们根本的区别在于他们的处.

质疑Lambda架构

9330 8 4K
Google和Twitter刚发布它们综合实时流处理和批处理的Lambda架构,LinkedIn的Jay Kreps则对这种架构提出了质疑,指出实时处理和批处理其实是两种范式,将它们硬生生捆绑在一起会.

kafka + storm 集成源码案例

10538 2 2K

kafka-storm-starter是一个展示如何实现Apache Kafka与Apache Storm的集成案例,使用Apache Avro作为数据序列化。运行$ ./sbt test可以对 Ka.

Twitter开源其MapReduce流框架: Summingbird

1195

summingbird是一个基于Apache2的开源项目,它是一个大规模数据系统,能够以批处理模式(Hadoop/MapReduce-based)或流模式(Storm-based)两者方式执行代码。T.

开源ScalaStorm

968

velvia/ScalaStorm · GitHubscalaStorm提供一个基于Storm的Scala DSL,进行实时分布式计算,也提供开发Storm topology的Scala和SBT框架。.

Akka与Storm对比

4 5549 3

Akka vs Storm简短的描述一下这两个系统: Storm是一个分布式的,实时计算系统。在一个Storm集群中,通过执行的topology,实现处理tuples数据流。每个拓扑由Spout(产生.

Storm在spider.io应用的经验教训

1071

Storm at spider.io - London Stormspider.io 是一个为在线广告提供反恶意软件,反恶意点击的系统,其任务是如何从大量日志中发现广告舞弊点击以骗取广告费。spide.

用Netty 让Storm飞

2967 1
Making Storm fly with Netty | Yahoo Engineering最近测试表明,使用Netty替代ZeroMQ作为Storm的消息机制,性能提升两倍。关键原因是Netty是.