+ Hadoop常见的端口 + Hadoop生态圈 + Hadoop配置文件以及简单的Hadoop集群搭建 + Hadoop参数调优 + 项目经验之基准测试 + Hadoop宕机 + Hadoop 高可用配置 Hadoop 常见的端口 ? dfs.namenode.http address:5007 ...
分类：
其他好文 时间：
2020-01-08 19:08:08
阅读次数：
91
+ HDFS 写文件 + 网络拓扑 节点距离计算 + HDFS读流程 + NN和2NN工作机制 + Fsimage和Edits解析 + CheckPoint时间设置 + NameNode故障后的数据恢复 HDFS 数据流 HDFS 写文件 1）客户端通过Distributed FileSystem模 ...
分类：
其他好文 时间：
2020-01-08 18:45:59
阅读次数：
95
目录包括运行流程图常用术语、执行原理、调度算法、容错及HA、监控 ...
分类：
其他好文 时间：
2020-01-08 14:11:33
阅读次数：
99
1.路由器和网线构成了网络通信的网络层和链路层（4层结构），下图为5层tcpip结构下的网络传输过程 （互联网的通信过程如上图粗曲线所示，在TCP/IP协议中是把链路层与物理层一起划分为网络接口层，其中H1,H2表示边缘主机，R1,R2表示路由器，HA表示硬件地址，IP表示IP地址） 根据图来分析， ...
分类：
其他好文 时间：
2020-01-08 12:46:46
阅读次数：
73
写流程： 正常： 1.HDFS客户端调用分布式文件系统的create方法远程过程调用namenode的create方法 namenode内完成几项判断 返回客户端 2.调用FSDataOutputStream的write方法 同时该流告诉Namenode addblock 返回列表 然后开始写 3. ...
分类：
其他好文 时间：
2020-01-06 14:42:27
阅读次数：
67
今天在用到camelot爬取pdf的表格时，想选取部分区域进行爬取，就想用plot把pdf画一下，选个坐标。 看了网上的示例，在使用camelot.read_pdf获取当前页面以后调用tables[0].plot('text')，提示AttributeError: 'Table' object ha ...
分类：
其他好文 时间：
2020-01-06 10:02:19
阅读次数：
269
handleInput2(e){ console.log(e) // 通过正则过滤小数点后两位 e.target.value = (e.target.value.match(/^\d*(\.?\d{0,2})/g)[0]) || null }, <el-input @keyup.native="ha ...
分类：
其他好文 时间：
2020-01-04 12:14:28
阅读次数：
67
Heartbeat 项目是 Linux-HA 工程的一个组成部分，它实现了一个高可用集群系统。心跳服务和集群通信是高可用集群的两个关键组件，在 Heartbeat 项目里，由 heartbeat 模块实现了这两个功能。 Heartbeat的高可用集群采用的通信方式是udp协议和串口通信，而且hear ...
分类：
其他好文 时间：
2020-01-03 10:43:46
阅读次数：
98
靶机下载链接： https://www.vulnhub.com/entry/ha-dhanush,396/ 主机扫描： 主机端口扫描： HTTP目录爬取 使用dirb dirsearch 爬取均未发现可利用的目录 另外看到ssh端口开启了，进行网页爬取字典生成进行爆破 cewl http://10. ...
分类：
其他好文 时间：
2020-01-02 15:56:32
阅读次数：
72
JobManager协调每个flink应用的部署，它负责执行定时任务和资源管理。 每一个Flink集群都有一个jobManager, 如果jobManager出现问题之后，将不能提交新的任务和运行新任务失败，这样会造成单点失败，所以需要构建高可用的JobMangager。 类似zookeeper一样 ...
分类：
其他好文 时间：
2020-01-01 18:48:57
阅读次数：
85
