- 1、本文档共5页,其中可免费阅读3页,需付费100金币后方可阅读剩余内容。
- 2、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。
- 3、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
- 4、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
存取方案分析
一、 三种文件存取方案
海量日志的存取,既要考虑存的效率,也要兼顾查询统计的便捷性。根据目前的实际情况,我们考虑了三种方案:
将日志直接写入文件,采用 grep的方式来查询,或者使用 lucene来实现全文检索。
使用 mongodb 来存储日志。
使用 hadoop 来存储日志。
每一种方案都有各自的优缺点,对于第一种直接写写文件的方案,存的速度非常快。但 是当文件量的逐渐增多,查询起来非常不方便。如果采用 lucene来建索引,会耗费很多存储空间,而且需要手动来维护历史文件,压缩、转储。所以,采用文件存储的方案是一种非常原始的,不便于管理的方案。
二、 Mongodb 简介
文档评论(0)