共 2 篇文章 |
|
基于Flume的美团日志收集系统(二)改进和优化基于Flume的美团日志收集系统(二)改进和优化。在《基于Flume的美团日志收集系统(一)架构和设计》中,我们详述了基于Flume的美团日志收集系统的架构设计,以及为什么做这样的设计。HdfsSink的性能问题:使用HdfsSink向Hdfs写日志,在高峰时间速度较慢;HdfsSink的path参数指明了日志被写到Hdfs的位置... 阅82 转0 评0 公众公开 15-07-30 15:09 |
agent-1.channels.ch-1.type = memoryagent-1.sources.avro-source1.channels = ch-1agent-1.sources.avro-source1.type = avroagent-1.sources.avro-source1.bind = 0.0.0.0agent-1.sources.avro-source1.port = 41414agent-1.sources.avro-source1.threads = 5agent-1.sinks.log-sink1.channel = ch-1agent-1.sinks.log-sink1.type = loggera... 阅1224 转3 评0 公众公开 15-07-30 15:05 |