主要包括以下三部分，本文为第三部分： 一. Scala环境准备 查看二. Hadoop集群(伪分布模式)安装 查看三. Spark集群(standalone模式)安装 Spark集群(standalone模式)安装 若使用spark对本地文件进行测试学习，可以不用安装上面的hadoop环境，若要结合 ...
分类：
其他好文 时间：
2018-07-15 21:23:54
阅读次数：
169
主要包括以下三部分，本文为第一部分： 一. Scala环境准备 二. Hadoop集群(伪分布模式)安装 三. Spark集群(standalone模式)安装 因Spark任务大多由Scala编写，因此，首先需要准备Scala环境。 注：楼主实验环境为mac os Scala环境准备 1. 下载 " ...
分类：
其他好文 时间：
2018-07-15 19:47:05
阅读次数：
464
恢复内容开始 第一步：安装jdk1.10版本 我选择是rpm安装的方式，所以我下载了rpm包：切记 不用--no-cookies可能在安装的时候要报 类似 error: open of <html> failed: No such file or directory。。。的错 wget --no-c ...
分类：
系统相关 时间：
2018-07-15 17:45:19
阅读次数：
197
0.环境： java 1.8 scala 2.11.8 maven 3.5.0 idea 2017 spark 2.2.0 1完成以下配置 java环境变量 scala环境变量 maven setting配置文件jar包存放路径 idea下载scala plugins语言插件 idea配置maven ...
分类：
其他好文 时间：
2018-05-08 14:47:49
阅读次数：
126
注意： spark用2.1.1 scala用2.11.11 材料准备 spark安装包 JDK 8 IDEA开发工具 scala 2.11.8 环境搭建步骤 将spark-2.1.1-bin-hadoop2.x版本至c盘下即可 将spark中的jar包全部提取出来另外放到一地方用于进行开发 新建ID ...
环境： hadoop2.6.0 jdk1.8 ubuntu 14.04 64位 1 安装scala环境 版本是scala-2.10.6，官网下载地址http://www.scala-lang.org/download/ ps：这里最好用jdk1.8配合这个scala版本，不然可能会报错，不过我看有些 ...
分类：
其他好文 时间：
2017-07-24 00:04:41
阅读次数：
252
最近重新搭建了一下maven+Scala的环境，发现很多东西都不记得了，于是重新记录一遍。 嫌搭建麻烦的话也可以直接下载Scala官方做好的环境http://scala-ide.org/download/sdk.html 里面包含了很多常用的插件，但是并没有用到maven而是sbt，但是在国内由于一 ...
分类：
系统相关 时间：
2017-07-04 12:11:16
阅读次数：
338
Ubuntu16.04安装后1.安装常用软件搜狗输入法+编辑器Atom+浏览器Chome+视频播放器vlc+图像编辑器GIMP Image Editor安装+视频录制软件RcordMyDesktop安装.2.开发环境配置.JDK环境配置+Scala环境配置+nodejs环境配置+开发工具intell ...
分类：
系统相关 时间：
2017-02-27 19:07:30
阅读次数：
385
(环境：jdk1.7,scala插件scala-2.1.1.2-site.zip) 1:下载scala插件 http://download.scala-ide.org/sdk/helium/e38/scala211/stable/site 2：解压到本地 将这两个文件里的jar包全部复制到eclip ...
分类：
系统相关 时间：
2017-01-18 16:01:43
阅读次数：
192
IDEA工具安装及scala基本操作 目录 一、 安装Scala. 3 1、 确保Java安装成功... 3 2、 解压scala-2.10.4.tgz. 3 3、 配置Scala环境变量... 3 4、 启动Scala命令行... 3 二、 Windows下安装IDEA的Scala插件... 3 ... ...
分类：
其他好文 时间：
2016-10-11 21:38:14
阅读次数：
241
