导读目录 第一节:sparksql 1:简介 2:核心 3:与hive整合 4:dataFrame 5:函数 第二节:spark Streaming 1:对比strom 2:DStream的算子 3:代码 4:driver HA 5:读取数据 第三节:spark调优 第一节:sparksql (1) ...
分类:
数据库 时间:
2020-01-09 20:46:58
阅读次数:
91
1 在服务器端 安装nfs 以及 rpcbind yum install -y nfs-utils rpcbindmkdir -p /data/nfschown -R nfsnobody:nfsnobody /data/nfs 2 配置权限 vim /etc/exports 文件写入 #nfs di ...
分类:
系统相关 时间:
2020-01-08 23:18:20
阅读次数:
404
目录包括运行流程图常用术语、执行原理、调度算法、容错及HA、监控 ...
分类:
其他好文 时间:
2020-01-08 14:11:33
阅读次数:
99
1.路由器和网线构成了网络通信的网络层和链路层(4层结构),下图为5层tcpip结构下的网络传输过程 (互联网的通信过程如上图粗曲线所示,在TCP/IP协议中是把链路层与物理层一起划分为网络接口层,其中H1,H2表示边缘主机,R1,R2表示路由器,HA表示硬件地址,IP表示IP地址) 根据图来分析, ...
分类:
其他好文 时间:
2020-01-08 12:46:46
阅读次数:
73
GlusterFS概述GFS是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上,并提供容错功能。它可以给大量的用户提供总体性能较高的服务。开源的分布式文件系统;由存储服务器、客户端以及NFS/Samba存储网关组成;GlusterFS特点:扩展性和高性能;高可用性;全局统一命名空间;弹性卷管理;基于标准协议模块化堆栈架构模块化,堆栈式的结构通过对
分类:
其他好文 时间:
2020-01-07 00:53:42
阅读次数:
95
今天在用到camelot爬取pdf的表格时,想选取部分区域进行爬取,就想用plot把pdf画一下,选个坐标。 看了网上的示例,在使用camelot.read_pdf获取当前页面以后调用tables[0].plot('text'),提示AttributeError: 'Table' object ha ...
分类:
其他好文 时间:
2020-01-06 10:02:19
阅读次数:
269
https://blog.csdn.net/lgcjava/article/details/77131695 作为后台开发兼运维人员,web服务器、api接口服务器、开发测试的各种工具(JIRA/bitbucket)等等越来越多。能否有个工具能实时监控各个服务器的运行状态。如果出现异常,及时邮件和微 ...
一、架构图 dns完成解析web1,web2来实现负载均衡 web1,web2使用后台的mysql数据库 web1,web2的页面数据全部放在nfs数据上,实现自动挂载 nfs服务器为web1,web2提供网页数据 10.7.2. 准备工作 设置ip信息 nmcli con add ifname e ...
分类:
Web程序 时间:
2020-01-05 12:04:01
阅读次数:
106
1.配置nfs存储卷yum-yinstallnfs-utilsrpcbind##安装nfs服务和RPC服务vim/etc/exports#nfs的配置文件/data/v110.1.1.0/24(rw,no_root_squash,no_all_squash,sync)#给10.1.1.0/24网段的ip访问的权限2.配置nginx的配置文件"default.conf"serve
分类:
Web程序 时间:
2020-01-05 09:46:27
阅读次数:
384
handleInput2(e){ console.log(e) // 通过正则过滤小数点后两位 e.target.value = (e.target.value.match(/^\d*(\.?\d{0,2})/g)[0]) || null }, <el-input @keyup.native="ha ...
分类:
其他好文 时间:
2020-01-04 12:14:28
阅读次数:
67