信息检索

高性能大数据流存储与检索技术

 

P1

 性能和特点:

采用MongoDB自建存储集群,实验采用服务器软硬件配置如下:

Intel Xeon E5606 @ 2.13GHz
16GB memory
RAID1 SATA disk
100Mb bandwidth network
SuSE10 sp2
MongoDB version 2.0.0

tu1 

图1. 海量数据插入性能比较

上图纵轴数据体现了单位时间插入的文档数量,横轴为持续插入的文档数量(同时针对指定一整型字段建立索引)。SM表示采用单一MongoDB节点;MC表示采用MongoDB官方集群;AISM表示采用基于MongoDB自构建集群的性能。

 主要应用:基于计算机集群日志信息存储与分析,微博短信等短文本流数据的存储及舆情分析等。

 应用案例:基于短文本数据流的分析系统。

发表评论

电子邮件地址不会被公开。 必填项已用*标注