InfoQ: Brisk之CassandraFS

11-11-14 banq
InfoQ: Brisk之CassandraFS

关键Cassandra是P2P的方式,管理起来复杂性降低,现在NoSQL最大问题是复杂性。问题是没有象Facebook那样对HBase有重量级的应用。

banq
2011-11-15 13:48
2011年11月14日 14:21 "@banq"的内容
问题是没有象Facebook那样对HBase有重量级的应用。 ...

今天看到Tiwtter的实时URL抓取(SpiderDuck: Twitter's Real-time URL Fetcher)是使用Cassandra的,SpiderDuck的Metadata Store: 这是一个基于Cassandra-based分布式哈希表,存储了某个URL的页面源数据和分辨率等关键信息,用于需要实时URL源数据的访问。

SpiderDuck的Cassandra-based Metadata Store 能够支持每秒10,000个请求,每个请求是典型的一个URL或20个左右小批量URL,也会处理大批量(200-300 URLs). 存储读取延迟是4-5 毫秒milliseconds, and its 99th percentile is 50-60 milliseconds.

[该贴被banq于2011-11-15 20:14修改过]




wei5445
2012-06-29 15:32
CassandraFS环境下用rm或rmr删除数据后,文件是删除了,但空间没有释放,我已经设计了HDFS的trash属性了,但没什么用。请问是什么原因呢?

猜你喜欢