检索结果

期刊

出版年

关键词

Please wait a minute...

选择:

导出引用
EndNote Ris BibTeX

显示/隐藏图片

Select

1. 面向海量非结构化数据的非关系型存储管理机制

刘超, 胡成玉, 姚宏, 梁庆中, 颜雪松

计算机应用 2016, 36 (3): 670-674. DOI: 10.11772/j.issn.1001-9081.2016.03.670

摘要（735）

PDF （819KB）（540）

针对传统的关系数据存储系统性能不足、容错性差,无法适应海量非结构化数据管理的问题,提出一种高性能、高可用非关系型存储管理机制。首先,设计了良好的用户访问服务接口,通过高效的一致性哈希算法支持数据分发到多个存储节点;其次,采用可配置的数据副本机制改善存储系统的可用性;最后,提出查询故障处理机制,用以提升存储系统的容错性,避免节点失效导致服务中断问题。实验结果表明,在不同规模用户负载下,新的存储系统的并发访问请求能力和传统的文件系统、关系数据库相比,分别提升了30%和50%;同时,在合理响应时间内,故障状态下的存储系统的可用性损失小于14%。因此,该机制适用于海量非结构化数据的高效存储管理。

参考文献 | 相关文章 | 多维度评价

Select

2. 云平台下图数据处理技术

刘超, 唐郑望, 姚宏, 胡成玉, 梁庆中

计算机应用 2015, 35 (1): 43-47. DOI: 10.11772/j.issn.1001-9081.2015.01.0043

摘要（678）

PDF （794KB）（684）

针对Hadoop云平台下MapReduce计算模型在处理图数据时效率低下的问题,提出了一种类似谷歌Pregel的图数据处理计算框架——MyBSP.首先,分析了MapReduce的运行机制及不足之处;其次,阐述了MyBSP框架的结构、工作流程及主要接口;最后,在分析PageRank图处理算法原理的基础上,设计并实现了基于MyBSP框架的PageRank算法.实验结果表明,基于MyBSP框架的图数据处理算法与基于MapReduce的算法相比,迭代处理的性能提升了1.9~3倍.MyBSP算法的执行时间减少了67%,能够满足图数据高效处理的应用前景.

参考文献 | 相关文章 | 多维度评价