1.到官网下载scala源代码 点击如下链接下载源码:http://www.scala-lang.org/download/all.html 选择需要的版本点击进行下载,我选择的是2.11.8版本,如下图: 2.在idea中设置指向源代码 在intellij中选择 File –> Project S ...
分类:
其他好文 时间:
2019-12-30 09:28:36
阅读次数:
114
1. 获取安装包下载链接 1. 获取安装包下载链接 访问https://kafka.apache.org/downloads 找到kafka对应版本 需要与服务器安装的scala版本一致(运行spark-shell可以看到当前安装的scala版本) 2. 执行命令下载并安装 cd /usr/loca ...
分类:
其他好文 时间:
2019-12-28 22:47:01
阅读次数:
89
刚开始接触大数据的时候,还是很迷茫的,要学习掌握的东西很多,linux,mysql,java,scala,看到这些的确很头大,于是乎也没有什么思绪,只能一个接着一个的去学习,先去学习linux,看到之后是一脸懵逼,之前没接触过底层的东西,所以开始庄装VM,在linux环境下去指定各种命令,让自己去熟 ...
分类:
系统相关 时间:
2019-12-27 11:46:23
阅读次数:
106
scalikejdbc官网:http://scalikejdbc.org/ScalikeJDBC是简洁数据库访问库。该库自然包装JDBC API。 需求:使用scalikejdbc3.3.2版本来操作MySQL数据库1) 通过SQL准备一张表user,有id,name,age三个字段2) 通过sca ...
分类:
数据库 时间:
2019-12-26 19:40:06
阅读次数:
108
IDEA中的scala项目访问HDFS,程序运行,可能出现的异常: 权限问题:Permission denied: user=СÎ÷?Îè, access=WRITE, inode="/":hadoop:supergroup:drwxr-xr-x 修改运行时参数,因为HDFS上的文件所属的用户是ha ...
分类:
数据库 时间:
2019-12-26 19:33:00
阅读次数:
103
步骤:1)MySQL的驱动2)Connection 重量级的获取过程。可以使用POOL优化3)Statement 执行的类4)ResultSet 结果的封装5)Close 在pom中添加scala、hadoop、Mysql驱动依赖包: <properties> <scala.version>2.11 ...
分类:
数据库 时间:
2019-12-26 19:09:52
阅读次数:
97
使用case语句构造匿名函数的“额外”好处, case语句(组合)除了可以被编译为匿名函数(类型是FunctionX,在Scala里,所有的函数字面量都是一个对象,这个对象的类型是FunctionX),还可以非常方便的编译为一个偏函数PartialFunction!(注意:PartialFuncti ...
分类:
其他好文 时间:
2019-12-22 20:10:31
阅读次数:
90
基础常识基础常识 软件 即一系列按照特定顺序组织计算机数据和指令的集合 分为 系统软件 和应用软件 系统软件 : windows mac os linux unix android ios.. 应用软件 word ppt 画图板 人机交互:图形化界面 vs 命令行方式 常用的DOS命令: dir 列 ...
分类:
编程语言 时间:
2019-12-21 00:29:48
阅读次数:
85
解决普通用户 环境变量shell 退出不生效问题 1、在~/.bashrc 编辑了 scalacat .bashrc export SCALA_HOEM=/home/aipf/scala-2.11.12export PATH=PATH:$SCALA_HOEM/bin :wq source ~/.ba ...
分类:
系统相关 时间:
2019-12-20 18:31:13
阅读次数:
156
前情提要 "Scala函数式编程指南(一) 函数式思想介绍" "scala函数式编程(二) scala基础语法介绍" "Scala函数式编程(三) scala集合和函数" "Scala函数式编程(四)函数式的数据结构 上" 1.List代码解析 今天介绍的内容,主要是对上一篇介绍的scala函数式数 ...
分类:
其他好文 时间:
2019-12-19 18:58:19
阅读次数:
120