分析: 对sbt版本结果没有影响,但是会影响后续的打包编译!!!!要命、 解决方法: 运行命令:sudo gedit ~/.bashrc 最后一行添加:TERM="${TERM/xterm-256color/xterm-color" 最后:source ~/.bashrc 结果: OK,两个问题都解 ...
分类:
其他好文 时间:
2020-02-11 10:09:21
阅读次数:
109
弄了整整一个晚上的sbt然后还是不行 停留在这个界面一动不动 下面这个问题由于上面的问题还待解决。。。(暂时先放弃了 ) ...
分类:
其他好文 时间:
2020-02-10 00:03:24
阅读次数:
68
今天在虚拟机上安装sbt和maven,按着林子雨老师的教程来的,也不知道是什么原因老出问题,到现在也没解决好。还学一些简单的爬虫知识。 ...
分类:
其他好文 时间:
2020-02-05 23:04:02
阅读次数:
64
今天完成了实验四,对于spark-shell交互式编程更加了解和RDD以及对于编写独立应用程序sbt的打包编程去重也有了了解 之前安装完sbt后对于后面的打包需要下载一些文件一直失败,后来我把 在网上查询解决方案,找了很久终于 教程里spark-core 换成了spark-sql 然后就下载成功了 ...
分类:
其他好文 时间:
2020-02-03 13:55:53
阅读次数:
72
安装sbtsbt是一款Spark用来对scala编写程序进行打包的工具,下载地址https://repo.typesafe.com/typesafe/ivy-releases/org.scala-sbt/sbt-launch/0.13.11/sbt-launch.jar 下载后,执行如下命令拷贝至 ...
分类:
其他好文 时间:
2020-02-03 13:34:38
阅读次数:
100
今日把之前用sbt打包Scala程序剩下的东西学习完了,在学习使用maven打包java程序中遇到了初次打包下载依赖包下载不了,目标网址404的问题,留在明天解决。 安装了scala进行了相关的实验。 明日计划学习使用Eclipse编写Spark应用程序(Scala+Maven)和(Scala+SB ...
分类:
其他好文 时间:
2020-01-29 23:12:50
阅读次数:
89
今天把Scala的Java独立应用编程解决了,安装了maven,并且测试了一下Java应用程序代码,以及用maven打包 Java程序,并通过spark-submit 运行程序,过程比较顺利,但是在安装sbt时验 sbt 是否可用,需要下载依赖包,但是我的一直 卡在这里 重新弄会出错,所以先弄了一下 ...
分类:
其他好文 时间:
2020-01-29 00:58:27
阅读次数:
80
(一)进入spark-shell命令界面(默认使用scala的命令界面) 1,如果进入了spark安装目录则使用、 1,一台机器启动spark:./bin/spark-shell --master <master-url>命令可进入shell界面,master-url参数可为:local[*]使用逻 ...
分类:
其他好文 时间:
2020-01-29 00:48:18
阅读次数:
82
swagger接口文档查看,请求地址:http://localhost:31001/swagger-ui.html 深入剖析Java编程中的中文问题及建议最优解决方法 cd /usr/local/nginx/sbin/ ./nginx 阿里云maven中央仓库配置 MongoDB、HBase、Red ...
分类:
其他好文 时间:
2020-01-28 23:16:33
阅读次数:
95
下载完Spark后,启动spark shell 然后建在了spark自带的本地测试文件,以及简单的RDD操作和退出spark shell 并且下载了 独立应用程序编程 scala独立应用编程 在安装sbt中耗时很长 安装的时候耗时很长,安装完成后 检测sbt不可用,心态爆炸 独立应用程序编程 ...
分类:
其他好文 时间:
2020-01-27 22:16:29
阅读次数:
80