RDD及其特点 1、RDD是Spark的核心数据模型,但是个抽象类,全称为Resillient Distributed Dataset,即弹性分布式数据集。 2、RDD在抽象上来说是一种元素集合,包含了数据。它是被分区的,分为多个分区,每个分区分布在集群中的不同节点上,从而让RDD中的数据可以被并行 ...
分类:
其他好文 时间:
2019-05-08 21:56:13
阅读次数:
137
阅读目录 一:系统数据库 二:数据库操作 三:命名规范 四:修改限权 五:修改密码 六:忘记密码 七:中文乱码问题 一:系统数据库 information_schema :虚拟库,不占用磁盘空间,存储的是数据库启动后的一些参数,如用户表信息、列信息、权限信息、字符信息等 mysql:核心数据库,里面 ...
分类:
数据库 时间:
2019-05-05 11:59:54
阅读次数:
158
1,开放API可能存在的数据安全问题 (1)数据窃取 通常体现为:钓鱼网站,拦截,伪装,截包 (2)数据篡改 中间被拦截,以代理的方式拦截数据,修改数据 (3)数据泄露 爬虫抓取核心数据 2,解决数据窃取的问题 RSA,DES(使用公私钥加解密) 3,解决数据篡改问题 MD5(不可逆的混淆算法,唯一 ...
######Nginx配置文件nginx.conf中文详解##### #定义Nginx运行的用户和用户组user www www; #nginx进程数,建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型,[ debug | info | notice | w ...
分类:
其他好文 时间:
2019-04-25 14:29:27
阅读次数:
140
目录:01 课程导学02 计算机网络面试核心03 数据库04 redis05 Linux06 Java底层知识JVM07 Java底层知识GC08 Java多线程与并发09 Java多线程与并发-原理interview-master.zipjavabasic-master.zip下载地址:百度网盘下 ...
分类:
编程语言 时间:
2019-04-15 23:36:16
阅读次数:
358
并发与并行 并行 : 任务数 <= 核数 ; 真正的 多个任务同时执行并发 : 任务数 > 核数 ; 快速的依次执行多个任务 并行 指的是任务数小于等于CPU核数,即同一时刻多个任务真的是?起执行的,真正的并行执行多任务只能在多核CPU上实现,但是由于任务数量远远多于CPU的核心数量,所以操作系统也 ...
分类:
其他好文 时间:
2019-04-14 18:13:55
阅读次数:
146
1991年,历史上的第一个python的编译器诞生了,它是用c语言来实现的并能够调用c库,在其诞生的初期其就已经具备了很多c语言之中的核心数据类型。 Python的应用十分的广泛,比如人们常听说的网站运维、第三方数据爬取、大数据分析等等,这都是python大展身手的领域,而其应用能够这么广泛,首先和 ...
分类:
其他好文 时间:
2019-03-31 16:50:58
阅读次数:
178
worker_processes 8; #nginx进程数,建议设置为等于CPU总核心数. #全局错误日志定义类型,[ debug | info | notice | warn | error | crit ] error_log /var/log/nginx/error.log info; #进程... ...
分类:
其他好文 时间:
2019-03-25 19:10:03
阅读次数:
199
Pandas介绍(panel + data + analysis) 为什么使用Pandas 便捷的数据处理能力 读取文件方便 封装了Matplotlib、Numpy的画图和计算 Pandas的核心数据结构(DataFrame+Panel+Series) 3大核心结构: DataFrame Panel... ...
分类:
其他好文 时间:
2019-03-22 21:27:22
阅读次数:
214
使用CentOS7.x使用习惯了后用top命令,然后按1就可以查看相关的cpu核心数等相关信息 相关概念: 物理CPU:实际Server中插槽上的CPU个数。 物理cpu数量:可以数不重复的 physical id 有几个。 逻辑CPU: Linux用户对 /proc/cpuinfo 这个文件肯定不 ...
分类:
其他好文 时间:
2019-03-18 11:57:39
阅读次数:
246