首页
期刊导航
期刊检索
论文检索
新闻中心
期刊
期刊
论文
首页
>
《深圳职业技术学院学报》
>
2014年1期
>
大数据处理框架中基于MDP的任务调度算法
大数据处理框架中基于MDP的任务调度算法
打印
分享
在线阅读
下载PDF
导出详情
摘要
针对大数据处理框架MapReduce中的任务调度问题,提出一种基于Markov决策过程(MarkovDecisionProcess,MDP)的任务调度算法,通过状态集来描述集群中节点的负载和作业的数据本地性需求,使用状态转移函数表示调度策略对状态的影响,采用值迭代求解算法求取最优策略,实现集群中节点的最优调度.实验结果表明,该算法能够保证数据本地性的同时,减少作业响应时间,提高系统综合性能.
DOI
ojnq09ggjr/1303813
作者
冯延蓬;仵博;孟宪军;何国坤;江建举
机构地区
不详
出处
《深圳职业技术学院学报》
2014年1期
关键词
大数据
MAPREDUCE
MARKOV决策过程
任务调度
分类
[文化科学][职业技术教育学]
出版日期
2014年01月11日(中国期刊网平台首次上网日期,不代表论文的发表时间)
相关文献
1
张嘉慧,汤平瑜,王远雄.
基于大数据处理的防窃电算法
.产业经济,2020-06.
2
李鑫磊.
工务轨道动态检测数据的大数据处理与优化算法研究
.建筑理论,2024-03.
3
徐爱芸.
大数据处理流程
.,2023-07.
4
徐爱芸.
大数据处理流程
.,2023-07.
5
杨艳光,任永鹏.
基于大数据的电力运营监控数据处理技术
.文化科学,2023-02.
6
陈岚.
基于卡尔曼滤波算法的民航雷达数据处理
.建筑技术科学,2021-07.
7
陈昆.
大数据数据治理之数据处理
.建筑技术科学,2020-12.
8
唐旋,王珍珍.
大数据数据治理之数据处理
.建筑技术科学,2023-09.
9
付民 .
大数据数据治理之数据处理
.,2022-05.
10
陈登溢 .
大数据数据治理之数据处理
.建筑技术科学,2022-09.
来源期刊
深圳职业技术学院学报
2014年1期
相关推荐
大数据数据治理之数据处理
基于粒计算的大数据处理高柯
基于云计算的大数据处理技术探讨
基于大数据背景的电力运营监控数据处理研究
基于大数据的电网调度框架构建及其应用
同分类资源
更多
[职业技术教育学]
试论职业高中英语口语教学
[职业技术教育学]
高职房地产经营与估价专业培养目标定位研究——以福建省为例
[职业技术教育学]
论秘书工作者的心理品质
[职业技术教育学]
合成空间理论对英语教学的启示
[职业技术教育学]
“同项目多层次”策略在中职计算机教学中的探究
相关关键词
大数据
MAPREDUCE
MARKOV决策过程
任务调度
返回顶部