一、工具准备 1、7台虚拟机（至少需要3台），本次搭建以7台为例，配好ip,关闭防火墙，修改主机名和IP的映射关系（/etc/hosts），关闭防火墙 2、安装JDK,配置环境变量 二、集群规划： 集群规划（7台）： 主机名 IP 安装的软件 运行的进程 hadoop01 192.168.*.121 ...
分类：
其他好文 时间：
2020-04-03 00:25:12
阅读次数：
82
代码流程： NameNode.main() // 入口函数 |——createNameNode(); // 通过new NameNode()进行实例化 |——initialize(); // 方法进行初始化操作 |——startHttpServer(); // 启动HttpServer |——loa ...
分类：
其他好文 时间：
2020-04-02 22:56:20
阅读次数：
127
Hadoop有三种模式：本地模式、伪分布模式、集群模式 1、本地模式 1、在/opt下面创建一个software文件 2、将文件hadoop-2.6.5.tar.gz拷贝到 /opt/software下面 3、在usr下创建hadoop把hadoop-2.6.5.tar.gz 复制到 /usr/ha ...
分类：
其他好文 时间：
2020-04-02 11:42:47
阅读次数：
75
./bin/hdfs zkfc -formatZK 初始安装时初始化zk，在Zookeeper中创建了路径/hadoop-ha/hacluster ./bin/hdfs haadmin -getServiceState master1 查看主节点的状态，是active还是standby ./bin/ ...
分类：
其他好文 时间：
2020-04-01 19:33:47
阅读次数：
55
LINK： "除法与取模" 鬼题。不过50分很好写。考虑不带除法的时候 其实是一个dp的组合计数。 考虑带除法的时候需要状压一下除法操作。 因为除法操作是不受x的大小影响的 所以要状压这个除法操作。 直接采用二进制状压是不明智的 2的个数最多为13个 2^13也同样到达了1e4的复杂度。 考虑 ha ...
分类：
其他好文 时间：
2020-04-01 14:40:44
阅读次数：
59
1概述 顶新苏州IDC机房配置了四个Linux HA+ Oracle数据库集群。其配置信息如下： 1.1店会系统&FC-arap系统集群 集群资源组名称 ac_group fc_group 集群资源文件挂载点 /ac-oradata /fc-oradata 集群服务IP地址 fmpracora-vi ...
分类：
系统相关 时间：
2020-04-01 10:44:47
阅读次数：
156
首先Namenode启动的总体流程大概是这样的： NameNode.main() // 入口函数 |——createNameNode(); // 通过new NameNode()进行实例化 |——initialize(); // 方法进行初始化操作 |——startHttpServer(); // ...
分类：
Web程序 时间：
2020-04-01 00:59:39
阅读次数：
80
1、gitlab介绍Gitlab的优势和应用场景： 开源免费，适合中小型公司将代码放置在该系统中； 差异化的版本管理，离线同步以及强大分支管理功能； 便捷的GUI操作界面以及强大账户权限管理功能； 集成度很高，能够集成绝大多数的开发工具； 支持内置HA，保证在高并发下仍旧实现高可用性；GitLab主... ...
分类：
其他好文 时间：
2020-04-01 00:51:36
阅读次数：
97
阅读源码第一步是要编译源码； 源码版本：hadoop2.6+ ~ hadoop2.7 这个范围均可，改动不是特别大 编译源码教程连接：https://www.jianshu.com/p/a66ab0235fb9 https://www.cnblogs.com/hequn/articles/48396 ...
分类：
其他好文 时间：
2020-04-01 00:43:48
阅读次数：
185
HDFS写数据的流程 HDFS shell上传文件a.txt，300M 对文件分块，默认每块128M。 shell向NameNode发送上传文件请求 NameNode检测文件系统目录树，看能否上传 NameNode向shell发送允许上传通知 shell向NameNode发送上传block1，备份为 ...
分类：
其他好文 时间：
2020-03-29 01:09:38
阅读次数：
66
