Spark的安装和应用.docx

《云计算及应用》

实验报告

项目名称Spark的安装和应用专业班级

学 号

姓 名

实验成绩：批阅教师：

2016年6月5日

PAGE

PAGE2

实验4《Spark的安装和应用》

实验学时： 2 实验地点： 二综实验室 实验日期：一、实验目的

Spark的安装和应用二、实验内容

完成spark的安装。

掌握spark的应用。三、实验方法

包括实验方法、原理、技术、方案等。四、实验步骤

下载spark

配置spark的环境变量

配置spark

安装scala

将安装的spark和scala以及配置的环境变量复制到各个子节点

启动hadoop

启动spark

测试spark是否安装和启动成功五、实验结果

记录实验输出数据和结果。六、实验结论

下载spark

解压spark

将解压的spark移动到目标位置

配置spark的环境变量

配置spark的slaves，添加各个子节点

配置spark

下载scala

将解压后的文件移动到目标位置

配置scala的环境变量

测试scala是否安装成功

将安装的spark和scala以及相应的配置文件复制到各个子节点

开启hadoop和spark

查看开启的结果

运行实例测试spark是否安装成功

七、实验小结

通过这次实验，首先需要配置spark的环境变量，通过课堂老师的讲解，我成功地安装了spark。中间出现了一些差错，我不得不从头安装，使我对spark有了更深的理解。