1.spark-shell交互式编程 (1) 该系总共有多少学生 scala> val lines = sc.textFile("file:///usr/local/spark/sparklab/Data01.txt") lines: org.apache.spark.rdd.RDD[String] ...
分类:
其他好文 时间:
2020-02-07 22:19:06
阅读次数:
182
本人为自学Java系列,内容来自于中国大学mooc华东师范大学陈育良教授《Java核心技术》,在此感谢老师! 一:继承 面向对象和面向过程编程语言最大的特点就是变量类型的继承,通过extend去继承父类 继承能够解决很多类型的重复定义,类别内的对象属性和方法都具有一定的共同点。将共同点提取出来,即形 ...
分类:
编程语言 时间:
2020-02-07 14:46:03
阅读次数:
84
今天完成了实验任务五-Spark SQL 编程初级实践 编程实现利用 DataFrame 读写 MySQL 的数据 (1) 在 MySQL 数据库中新建数据库 sparktest,再建表 employee,包含下列两行数据; 表 1 employee 表原有数据 id name gender age ...
分类:
其他好文 时间:
2020-02-07 14:32:42
阅读次数:
88
Flume 官网下载 Flume1.7.0 安装文件,下载地址如下: http://www.apache.org/dyn/closer.lua/flume/1.7.0/apache-flume-1.7.0-bin.tar.gz 下载后,把 Flume1.7.0 安装到 Linux 系统的“/usr/ ...
分类:
其他好文 时间:
2020-02-06 20:19:45
阅读次数:
95
今天完成了实验任务四-RDD编程初级实践,先在网上查了一下资料。 Spark大数据处理的核心是RDD,RDD的全称为弹性分布式数据集,对数据的操作主要涉及RDD的创建、转换以及行动等操作,在Spark系列(二)中主要介绍了RDD根据SparkContext的textFile创建RDD的方法,本小节将 ...
分类:
其他好文 时间:
2020-02-06 14:52:42
阅读次数:
65
今天主要进行了spark实验六的学习,Spark Streaming 编程初级实践 Flume 是非常流行的日志采集系统,可以作为 Spark Streaming 的高级数据源。请把 Flume Source 设置为 netcat 类型,从终端上不断给 Flume Source 发送各种消息,Flu ...
分类:
其他好文 时间:
2020-02-06 14:42:22
阅读次数:
107
软件下载devc++5.11:https://sm.myapp.com/original/Development/Dev-Cpp_5.11_TDM-GCC_4.9.2_Setup.exe 代码结构(初级): #include<iostream>#include<cstdio>using namesp ...
分类:
编程语言 时间:
2020-02-05 20:06:27
阅读次数:
142
转至:https://www.jianshu.com/p/fdde4a9d1d9d tkinter介绍 tkinter是python自带的GUI库,是对图形库TK的封装 tkinter是一个跨平台的GUI库,开发的程序可以在win,linux或者mac下运行 除此之外还存在很多图形库,例如 """ ...
分类:
编程语言 时间:
2020-02-05 16:33:08
阅读次数:
91
作为一个前端的初级程序媛,对于后台的代码编写并不了解,但为了更好地配合全局工作,就把后台的环境搭配和代码都照搬过来了,这样可以直接在自己电脑上拉取最新后台代码并执行,在前端代码中进行调用,就能在这闭门不出的日子在家办公啦!下面是在后台小哥哥的指导下从无到有搭建过程,有些描述不一定准确,敬请指正! 1 ...
分类:
其他好文 时间:
2020-02-05 16:15:04
阅读次数:
78
从软考历年的合格率来看,软考的通过率并不是很高,这可能跟软考报名没有设很高的门槛也是有一定关系的。软考分初、中、高三个级别,级别越高肯定难度也越大,不过一般来说只要有相关专业基础要通过软考的初级考试并不是很难。而中级的话肯定相对来说是有一定难度的,其次也要看报考的项目,有些项目偏技术类的可能难度会更大。高级的话是难度最高的,而且有三个考试科目,其中包含了论文,这对于专业知识的运用是有一定考量的。总
分类:
其他好文 时间:
2020-02-04 17:16:15
阅读次数:
84