哈哈哈哈哈,进入编程行业大概接触了一下的编程语言,Java,SQL,Python相对比较熟悉. 生命不息,学习不止. C++版本: Java版本: C#版本: SQL版本: Python版本: Scala版本: ...
分类:
其他好文 时间:
2019-07-16 10:21:54
阅读次数:
73
一、变量 1、三种变量修饰符 val 定义 immutable variable(不修改 常量) var 定义 immutable variable(可修改 变量) lazy val (惰性赋值的常量):不直接算出结果,在系统第一次调用 lazy val 的时候计算结果 * 可以不显示指定变量的类型 ...
分类:
其他好文 时间:
2019-07-14 19:52:29
阅读次数:
84
Scala的安装 使用scala必须有jdk windows下开发工具的安装(我这里使用的是IDEA) 进入这个页面,如果没有进入这个界面,而直接进入项目的话 请点击https://blog.csdn.net/Gnd15732625435/article/details/81182078 .点击co ...
分类:
其他好文 时间:
2019-07-13 20:10:10
阅读次数:
112
Partial函数的定义 scala> val isVeryTasty: PartialFunction[String, String] = { case "Glazed Donut" | "Strawberry Donut" => "Very Tasty"}isVeryTasty: Partial ...
分类:
其他好文 时间:
2019-07-12 11:19:01
阅读次数:
86
Kafka是什么 在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。 1)Apache Kafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2)Kafka最初是由LinkedIn公司开发,并于 2011年初开源。 ...
分类:
其他好文 时间:
2019-07-11 12:25:26
阅读次数:
128
RDD中cache和persist的区别 通过观察RDD.scala源代码即可知道cache和persist的区别: def persist(newLevel: StorageLevel): this.type = { if (storageLevel != StorageLevel.NONE && ...
分类:
系统相关 时间:
2019-07-11 09:17:38
阅读次数:
147
spark版本:1.6.0 scala版本:2.10 报错日志: 报错截图: 主要资源配置: --driver-memory 2g --executore-memory 2g 临时解决方案: 增大driver端的内存 --driver-memory 3g --executore-memory 2g ...
分类:
其他好文 时间:
2019-07-10 23:08:14
阅读次数:
187