Spark的windows、linux单机部署
1、windows单机部署
??相信大多数同学用的都是windows系统,没错,我也是windows系统,主要是因为公司电脑安装了深信服的办公软件,但是这个不支持linux系统,所有我们公司都强制被使用win10。为了调试方便,还是习惯在电脑上装上单机Spark,好在Spark也支持win10。
废话不多说,我们开始哈。。。
1.1、安装Java环境 ??这里我们安装Java8,哎,这会是不是有同学问了现在Java15都有了我们为啥还用Java8了????? 那是为了保证我们本地的开发环境和生产环境一致嘛,不能因为版本不一样导致部署失败是吧,😊😊😊😊,是不是又有人问,问什么生产环境不能用15呢?对嘛,因为收费呗。如果你还想有人给你发W,那就Java8。🤡🤡🤡🤡 1.1.1、下载安装包,安装 ??为了不去该死的外网下载,这里我给大家直接提供一下。
百度网盘 jdk-8u261-windows-x64
链接:https://pan.baidu.com/s/1GQfGO7qhxnBPn-AV5HUE7g
提取码:kxsc
下载了,然后直接下一步,下一步,下一步到了选择安装路径的地方,记得选择自己的安装路径哦,记住路径,后边配置环境变量会用,这里我就不贴图了。大家理解。 1.1.2、环境变量
直接电脑左下角搜索环境变量
点击环境变量
点击新建,第一行添加JAVA_HOME,第二行添加你的java路径,确定,如图。
在众多的变量中找到path,点开添加,写上%JAVA_HOME%\bin\。
打开终端,输入java -version,出现如下图第七步,即成功。
1.1、安装Scala环境 ??有人问为什么要装Scala,因为spark就是用scala写的。
|