一.scala基础 1.数据基础 2.变量和常量的声明 var 定义的是变量可以修改val 定义的是常量不可以修改 package com.shsxt.scala?/** * @author: Savage * @data: 2019/10/21 19:50 */object Text {? cla ...
分类：
其他好文 时间：
2019-12-30 14:31:47
阅读次数：
110
Kafka是一款由linkedln（领英）公司开发，并由Apache基金会开源的中间件。
Kafka由Scala和Java写成，主要负责分布式消息订阅，它可以处理生产者和消费者之间的动作流，作为消息队列为业界所使用。 ...
分类：
其他好文 时间：
2019-12-30 09:34:45
阅读次数：
103
1.到官网下载scala源代码 点击如下链接下载源码：http://www.scala-lang.org/download/all.html 选择需要的版本点击进行下载，我选择的是2.11.8版本，如下图： 2.在idea中设置指向源代码 在intellij中选择 File –> Project S ...
分类：
其他好文 时间：
2019-12-30 09:28:36
阅读次数：
114
1. 获取安装包下载链接 1. 获取安装包下载链接 访问https://kafka.apache.org/downloads 找到kafka对应版本 需要与服务器安装的scala版本一致（运行spark-shell可以看到当前安装的scala版本） 2. 执行命令下载并安装 cd /usr/loca ...
分类：
其他好文 时间：
2019-12-28 22:47:01
阅读次数：
89
刚开始接触大数据的时候，还是很迷茫的，要学习掌握的东西很多，linux，mysql，java，scala，看到这些的确很头大，于是乎也没有什么思绪，只能一个接着一个的去学习，先去学习linux，看到之后是一脸懵逼，之前没接触过底层的东西，所以开始庄装VM，在linux环境下去指定各种命令，让自己去熟 ...
分类：
系统相关 时间：
2019-12-27 11:46:23
阅读次数：
106
scalikejdbc官网：http://scalikejdbc.org/ScalikeJDBC是简洁数据库访问库。该库自然包装JDBC API。 需求：使用scalikejdbc3.3.2版本来操作MySQL数据库1） 通过SQL准备一张表user，有id，name，age三个字段2） 通过sca ...
分类：
数据库 时间：
2019-12-26 19:40:06
阅读次数：
108
IDEA中的scala项目访问HDFS，程序运行，可能出现的异常： 权限问题：Permission denied: user=СÎ÷?Îè, access=WRITE, inode="/":hadoop:supergroup:drwxr-xr-x 修改运行时参数，因为HDFS上的文件所属的用户是ha ...
分类：
数据库 时间：
2019-12-26 19:33:00
阅读次数：
103
步骤：1）MySQL的驱动2）Connection 重量级的获取过程。可以使用POOL优化3）Statement 执行的类4）ResultSet 结果的封装5）Close 在pom中添加scala、hadoop、Mysql驱动依赖包： <properties> <scala.version>2.11 ...
分类：
数据库 时间：
2019-12-26 19:09:52
阅读次数：
97
使用case语句构造匿名函数的“额外”好处， case语句（组合）除了可以被编译为匿名函数（类型是FunctionX，在Scala里，所有的函数字面量都是一个对象，这个对象的类型是FunctionX），还可以非常方便的编译为一个偏函数PartialFunction！（注意：PartialFuncti ...
分类：
其他好文 时间：
2019-12-22 20:10:31
阅读次数：
90
基础常识基础常识 软件 即一系列按照特定顺序组织计算机数据和指令的集合 分为 系统软件 和应用软件 系统软件 ： windows mac os linux unix android ios.. 应用软件 word ppt 画图板 人机交互：图形化界面 vs 命令行方式 常用的DOS命令： dir 列 ...
分类：
编程语言 时间：
2019-12-21 00:29:48
阅读次数：
85
