• Complex
  • Title
  • Keyword
  • Abstract
  • Scholars
  • Journal
  • ISSN
  • Conference
搜索

Author:

王玉凤 (王玉凤.) | 梁毅 (梁毅.) | 金翊 (金翊.) | 李光瑞 (李光瑞.)

Indexed by:

CQVIP CSCD

Abstract:

针对Hadoop平台数据被任务调度感知,进行本地化处理的新特征,探索Haoop平台中Map任务数据访问监控机制。提出Hadoop平台数据访问监控不仅应服务于数据存取效率的提升,还应服务于Map/Reduce并行作业执行效率提升的基本思想,并增加对并行执行多Map任务数据访问开销均衡性的监控。基于该思想,定义Hadoop平台数据访问监控的粒度和监控信息组成;依托Hadoop平台现有结构,设计了基于master-slave的监控体系结构,并给出了监控主要功能模块的具体实现技术及测试结果。

Keyword:

Map/Reduce 监控 数据访问 Hadoop

Author Community:

  • [ 1 ] 北京工业大学计算机学院
  • [ 2 ] 北京市计算中心

Reprint Author's Address:

Email:

Show more details

Related Keywords:

Source :

计算机工程与应用

Year: 2014

Issue: 22

Volume: 50

Page: 43-49

Cited Count:

WoS CC Cited Count: 0

SCOPUS Cited Count:

ESI Highly Cited Papers on the List: 0 Unfold All

WanFang Cited Count:

Chinese Cited Count:

30 Days PV: 5

Online/Total:679/10537118
Address:BJUT Library(100 Pingleyuan,Chaoyang District,Beijing 100124, China Post Code:100124) Contact Us:010-67392185
Copyright:BJUT Library Technical Support:Beijing Aegean Software Co., Ltd.