作者:郭会云,房俊,李冬 单位:国防科技大学计算机学院 出版:《计算机工程与科学》2017年第04期 页数:7页  (PDF与DOC格式可能不同) PDF编号:PDFJSJK2017040050 DOC编号:DOCJSJK2017040059 下载格式:PDF + Word/doc 文字可复制、可编辑
  • 物联网感知流数据多以时序数据为主,具有数据量大、连续到达、多来源等特点。现有的基于HBase的交通流数据存储系统在数据写入并发量大时,仍然存在存储效率低与系统可用性不高的问题。针对该问题,设计并实现了基于负载均衡的多源流数据实时存储系统。该系统将数据代理扩展为集群架构,提出了一种基于负载均衡的任务调度算法,实现了任务与数据代理之间的按序匹配,使数据代理集群负载均衡地处理任务,实现数据并行存储到HBase数据库中。实验对比结果表明:该系统使各数据代理的数据分配比例维持在0.3~0.4,同时以约1.5倍于单数据代理的速度将数据写入HBase数据库。

    提示:百度云已更名为百度网盘(百度盘),天翼云盘、微盘下载地址……暂未提供。