学习过得技术 HDFS YARN MR HIVE HBASE SPARK SPARK(sparkCore、sparkSql、sparkStreaming) HDFS 数据库管理、 存磁盘 Ha模式(在zookeeper之上) 联邦机制(把大象装进冰箱) split切片 Hbase 列式数据库 半结构 ...
分类：
其他好文 时间：
2021-04-05 12:37:34
阅读次数：
0
1.1 MapReduce定义 MapReduce 是一个分布式运算程序的编程框架，是用户开发“基于 Hadoop 的数据分析 应用”的核心框架。 MapReduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个 Hadoop 集群上。 1.2 Ma ...
分类：
其他好文 时间：
2021-04-05 12:32:51
阅读次数：
0
前言 Django全家桶自带的分页组件只能说能满足分页这个功能，但是没那么好用就是了 Django的分页效果 django-pure-pagination分页效果 使用方法 首先安装： pip install django-pure-pagination 添加到App INSTALLED_APPS ...
分类：
其他好文 时间：
2021-03-31 11:47:29
阅读次数：
0
必备知识点： 1.代理和隧道技术区别? 2.隧道技术为了解决什么? 3.隧道技术前期的必备条件？ 在数据通信被拦截的情况下利用隧道技术封装改变通信协议进行绕过拦截 CS、MSF无法上线，数据传输不稳定无回显，出口数据被监控，网络通信存在问题等 在实际的网络中，通常会通过各种边界设备、软/硬件防火墙甚 ...
分类：
其他好文 时间：
2021-03-30 13:30:25
阅读次数：
0
准备文本文件从文件创建RDD lines=sc.textFile() 筛选出含某个单词的行 lines.filter()lambda 参数：条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-30 13:26:11
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数：条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-30 13:18:46
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter() 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-30 13:05:37
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数：条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-30 12:53:37
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数：条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() 3. ...
分类：
其他好文 时间：
2021-03-30 12:53:01
阅读次数：
0
这几天把SSM框架整体整理了一遍，下面将三个系统分开阐述以下他们的基本实现方式，最后写一个整体的程序整合以下， 首先是新建一个工程，因为暂时没有和Views有什么联系，我就新建了一个javaProject 学习一个新的框架，首先是引入jar包 mybatis框架所需要的jar包有 mybatis-3 ...
分类：
其他好文 时间：
2021-03-30 12:48:28
阅读次数：
0
