Uber使用 CLP 将日志记录成本降低两个数量级

22-10-17 banq

大数据处理生成的日志太大而无法处理和索引?Uber 写了如何使用与 Log4J appender 集成的 CLP 来有效地压缩和索引 Spark 日志。CLP(Compressed Log Processor) 是一款能够无损压缩文本日志并在不解压的情况下搜索压缩日志的工具。

详细点击标题