admin 管理员组文章数量: 1184232
2024年4月16日发(作者：border bottom color)
Spark Windows 调试环境搭建教程
本教程介绍的是Windows环境下的Spark调试环境的搭建步骤。
一、组件介绍
首先列举搭建此环境需要的各个组件：
•
JDK，安装JDK 6或者JDK 7（必备条件）
•
IDEA，有两个版本：Ultimate Edition & Community Edition，后者是free的，
而且完全能满足学习者所有的需求
•
Scala，Spark是用Scala语言写成的，在本地编译执行需要这个包
•
SBT，scala工程构建的工具
•
Git，IDEA自动下载SBT插件时可能会用到的工具
二、安装步骤
1、安装Scala。（建议2.10.2版本）
完成后，在windows命令行中输入scala，检查是否识别此命令。
如果不识别，查看环境变量Path中是否有....scalabin（我的电脑右键，属性 -> 高
级系统设置 -> 环境变量）,没有的手动将Scala文件夹下的bin目录的路径
Scala 2.10.2已亲测可行。
2、安装SBT
运行SBT的安装程序，运行完成后，重新打开windows命令行，输入sbt，检查是
否识别此命令。没有的话，手动配置环境变量，添加...sbtbin
运行完SBT的安装程序之后，并不意味着完成了sbt的安装，在windows命令放下
输入sbt后，SBT会自动的下载安装它所需要的程序包，请耐心等待全部下载成功。
3、安装Git
运行Git的安装程序，安装完成后，重新打开windows命令行，检查时候识别git
命令。
4、安装IDEA、安装IDEA的Scala插件
打开IDEA，在‘Welcome to IntelliJ IDEA’界面的‘Quick Start’栏，点击
Configure，选择Plugins。
在弹出的窗口中可以看到已安装的插件，现在IDEA默认还没有Scala的插件。需要
点击左下角的Install ，在搜索框中输入‘scala’，点击安装。安装完
版权声明：本文标题：Spark Windows调试环境搭建教程 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://roclinux.cn/p/1713222649a624657.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。
发表评论