- 1、本文档共4页,其中可免费阅读2页,需付费500金币后方可阅读剩余内容。
- 2、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。
- 3、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
- 4、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
企业管理-MapReduce的工作流程
一、数据输入与分片
(一)数据存储与读取
MapReduce处理的数据通常存储在分布式文件系统(如
Hadoop分布式文件系统HDFS)中。任务启动时,主节
点(JobTracker,在Hadoop1.x版本中,Hadoop2.x版
本为ResourceManager)会从文件系统读取数据文件。例
如,在处理大规模日志文件时,文件会被存储在HDFS
ERP应用资格证持证人
从事会计行业10多年,从建账、记账、报税、成本核算控制、经营报表管理分析、公司注册变更注销等有着丰富的实战经验,欢迎志同道合的朋友相互交流学习,共同探讨,共同进步。
文档评论(0)