赵勇
- 作品数：5 被引量：11H指数：2
- 供职机构：清华大学更多>>
- 发文基金：国家自然科学基金中央高校基金更多>>
- 相关领域：自动化与计算机技术电子电信更多>>
- 最小化多MapReduce任务总完工时间的分析模型及其应用
- 2014年
- 随着大规模的MapReduce集群广泛地用于大数据处理,特别是当有多个任务需要使用同一个Hadoop集群时,一个关键问题是如何最大限度地减少集群的工作时间,提高MapReduce作业的服务效率。可将多个MapReduce作业当做一个调度任务建模,观察发现多个任务的总完工时间和任务的执行顺序有密切关系。研究目标是设计作业调度系统分析模型,最小化一批MapReduce作业的总完工时间。提出一个更好的调度策略和实现方法,使整个调度系统符合经典Johnson算法的条件,从而可使用经典Johnson算法在线性时间内获取总完工时间的最优解。同时,针对需要使用两个或多个资源池进行平衡的问题,提出了一种线性时间解决方案,优于已知的近似模拟方案。该理论模型可应用于提高系统响应速度、节能和负载均衡等方面,对应的应用实例提供了证实。
- 田文洪陈瑜王心阳薛瑞尼赵勇
- 关键词：HADOOPMAPREDUCE调度优化
- 科学工作流与高性能计算集成方案被引量：4
- 2014年
- 科学工作流为科学计算提供了工作流定义、流程管理和任务并行化等支持,高性能计算为大规模数据处理提供了集群管理、任务管理、资源调度等机制。如今正进入一个"大数据"时代,将科学工作流系统与高性能计算结合实现高性能计算平台上大规模并行计算具有重要意义。集成中间件与上层工作流系统和底层高性能计算平台进行交互,提供任务提交与状态监控功能。同时,集成方案为分布式集群中计算平台提供新的参考实现。基于上述分析以Swift科学工作流与Windows高性能计算平台集成方案为例,通过NASA MODIS图片处理工作流来分析并验证集成方案的可行性和性能。
- 赵勇李有福李小龙刘鹏田文洪
- 关键词：分布式集群科学工作流
- IPv6自动地址配置与邻居发现技术及实现
- IPv6 是“因特网协议第六版”的缩写,是由IETF 设计的下一代因特网协议,目的是取代当前的因特网协议第四版/(IPv4/)。IPv4 在过去的应用中具有辉煌的业绩,但随着应用的普及和深入,已经显露出许多弊端。其中最迫...
- 赵勇
- 关键词：IPV6邻居发现自学习
- 文献传递
- 一种具有自学习功能的CPU流控模式探索被引量：1
- 2005年
- 介绍了分布式交换机系统环境下CPU流控模型与算法;通过综合考虑并引入CPU实时利用率、学习抑制因子、学习步长等,构造了一具有简单自学习能力的CPU流控算法,改进了传统算法完全依靠经验数据的弊端;同时考虑了算法在嵌入式设备上的可实现性和易用性。因此构造自学习算法模型,综合考虑在各种网络业务环境下如何实现CPU流控是算法的关键。在基于自学习和适应不同运行业务考虑的基础上,构造出了一个CPU流控的算法模型,并就算法在不同情况下的工作效能做了分析。
- 赵勇杨岚兰
- 关键词：自学习算法
- 大数据——时代变革的核心驱动力被引量：4
- 2015年
- 大数据蕴含着巨大的社会、经济和商业价值,随着数据的爆发,传统的信息技术架构在扩展性、容错性、性能、安装部署及维护等方面面临着大数据的挑战,催生了一大批面向大数据市场的新模式、新技术、新产品和新服务,进而促进信息产业的加速增长。针对大数据的特征、发展意义、技术支撑及应用案例进行描述与分析,进一步探讨大数据的发展趋势和对时代变革的驱动。
- 赵勇
- 关键词：云计算数据挖掘
