中央高校基本科研业务费专项资金(2013ZZ0044)
- 作品数：4 被引量：183H指数：2
- 相关作者：刘波林伟伟齐德昱更多>>
- 相关机构：华南理工大学华南师范大学更多>>
- 发文基金：中央高校基本科研业务费专项资金广东省科技计划工业攻关项目国家自然科学基金更多>>
- 相关领域：自动化与计算机技术更多>>
- 云存储系统的能耗优化节点管理方法被引量：1
- 2014年
- 为节省云存储系统的能耗,文中考虑在云存储系统利用率较低时关闭部分存储节点.为了保证部分存储节点关闭时数据的可用性,针对如何选择云存储系统中可以关闭的节点集合问题,设计了基于辅助节点的贪心算法,并针对异构云存储系统的能耗优化问题,提出了面向异构云存储系统的能耗优化贪心算法.模拟实验结果表明,文中提出的面向异构系统的能耗优化贪心算法能较好地降低异构云存储系统的能耗,其性能明显优于一般的贪心算法,从而验证了所提算法的有效性.
- 林伟伟贺品嘉刘波
- 关键词：数据管理能耗优化贪心算法
- 一种面向云存储数据容错的ARC缓存淘汰机制被引量：2
- 2015年
- Hadoop默认采用副本冗余方式实现数据容错,但这种容错方式存在着空间占用过大、存储效率低等问题。为此,在分析了ARC缓存淘汰算法的基础上,提出了一种面向云存储数据容错的ARC缓存淘汰机制ARCMFF。在文件的访问过程中,ARCMFF通过维护一个LRU队列和一个LFU队列统计出访问频率高的文件并将其加入缓存系统中,以提高访问性能;在ARCMFF中,大部分文件采用的是纠删码方式容错存储,只有缓存中的文件才用副本冗余方式存储。纠删码的编码效率很高,因此系统能够节省大量的存储空间。实验结果表明,在分布式文件系统中,ARCMFF能够节省文件存储空间,大大地提高Hadoop的存储效率,且能够在一定程度上提高文件的写入性能。
- 伍秋平刘波林伟伟
- 关键词：数据容错HADOOP纠删码ARC
- 大数据研究综述被引量：165
- 2014年
- 主要从大数据的概念着手,对比分析了国内外大数据研究和应用现状,重点分析比较当前大数据主流处理工具的优缺点,并深入归纳总结了基于数据存储的大数据处理技术、基于数据挖掘的大数据处理技术、基于查询的大数据处理技术的优缺点和适用场景。最后,在前面比较和分析的基础上给出了大数据研究和发展的方向,为大数据的研究提供有益参考。
- 涂新莉刘波林伟伟
- 关键词：大数据数据处理数据挖掘
- 基于CSP的能耗高效云计算资源调度模型与算法被引量：15
- 2013年
- 利用约束满足问题对异构云数据中心的能耗优化资源调度问题建模,通过求解建立的约束模型可以获得能耗最优的资源分配方式,并在此基础上提出了能耗优化的资源分配算法dynamicpower(DY)。与已有的算法MinPM、FFD、BFD相比,算法DY考虑了资源的异构性,能够降低云数据中心物理服务器的能耗。最后,利用Choco实现了提出的算法DY,并将DY与MinPM、FFD、BFD进行实验比较,实验结果表明,提出的算法在能耗上有明显优势。
- 林伟伟刘波朱良昌齐德昱
- 关键词：云计算资源分配能耗效率约束满足问题
