hadoop单机环境运行wordcount实例.docxVIP

下载本文档

12
0
约小于1千字
约 13页
2017-07-20 发布于重庆
举报
版权申诉

hadoop单机环境运行wordcount实例.docx

1、有哪些信誉好的足球投注网站（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
7、VIP文档为合作方或网友上传，每下载1次，网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

hadoop单机环境运行wordcount实例

hadoop单机运行实例2017年3月22日11:094.26日0.添加环境变量。1.创建输入文件夹。2.创建数据文件。3.运行实例。4.查看实例运行结果。5.完成实验文档的编写。??0.添加环境变量vi /etc/profile添加如下内容：保存退出。运行source /etc/profile使修改生效??1.创建输入文件夹。1.1 进入hadoop-2.2.0/sbin目录。查看hadoop命令在sbin目录下运行hdfsdfs -mkdir /input。??2.创建wordcount实例目录和数据文件。?2.1我们需要找到wordcount实例的位置，首先需要找到hadoop-2.2.0文件夹，然后依照下面路径：/tmp/hadoop-2.2.0/share/hadoop/mapreduce会看到如下图：2.2创建文件worcount并输入内容。vi /usr/wordcount输入以下内容hello hadoophello masterhello slavehello yarnwhat is yarn2.3 将本地文件上传到HDFS中??查看上传后的文件情况，执行如下命令hdfsdfs -ls /input查看上传文件的内容：?3.运行实例。hadoop jar /tmp/hadoop-2.2.0/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /input/wordcount /outputoutput是结果输出目录。运行过程如下：?4.查看运行结果。4.1在运行的过程中会自动创建output输出目录，为了存放运行输出结果文件。使用hdfsdfs -ls /output查看输出目录??4.2使用hdfsdfs -cat part-r-00000查看输出文件4.3可以利用web界面监控和获取yarn的作业信息http://syn:8088??5.完成实验文档的编写。