Hadoop和HDFS内容:1.什么是HDFS文件系统? HDFS是大数据开源框架hadoop的组件之一,全称(Hadoop Distributed File System),它是一个分布式文件系统,由多台服务器联合起来实现文件存储功能,通过目录树来定位文件,集群中的服务器都有有各自的角色. 2.h ...
分类:
其他好文 时间:
2020-07-26 23:17:20
阅读次数:
88
1.1.HDFS. 它是一个分布式文件管理系统,用来存储文件,通过目录树来定位文件;由多个服务器联合起来实现功能,集群中的服务器有各自的角色。 适用场景:适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据的分析,并不适合用来做网盘应用。 1.1.1NameNode:就是master,它 ...
分类:
其他好文 时间:
2020-07-26 23:15:19
阅读次数:
102
8.3 HDFS-HA集群配置 8.3.1 环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK,配置环境变量等 8.3.2 规划集群 表3-1 hadoop102 hadoop103 hadoop104 NameNode Na ...
分类:
其他好文 时间:
2020-07-26 23:10:23
阅读次数:
85
lvs-dr实现mysql负载均衡集群 环境说明: 服务器的操作系统均为centos7,vip和rip在同一网段,使用lvs-dr模型来实现mysql集群服务 所有服务器均已配置好处VIP外的静态IP 两台mysql服务器的主机名分别是node1和node2,且已安装并启动好mysql 1. DR上 ...
分类:
数据库 时间:
2020-07-26 19:51:24
阅读次数:
111
概述 数据同步场景类型: 主数据库与备份数据库之间的数据备份; 主系统与子系统间的数据更新; 属于同类型不同集群数据库间的数据同步; 不同区域、不同数据库类型间的数据传输交换; 大数据系统:数据从业务系统同步进入数据仓库、数据从数据仓库同步进入数据服务或者数据应用。(本篇主讲数据从业务系统同步进入数 ...
分类:
其他好文 时间:
2020-07-26 19:27:15
阅读次数:
68
一,安装: sudo apt-get install nginx /usr/sbin/目录下是nginx命令所在目录, /etc/nginx/目录下是nginx所有的配置文件,用于配置nginx服务器以及负载均衡等信息 二,查看Nginx进程是否启动: ps -ef|grep nginx 三,启动N ...
分类:
系统相关 时间:
2020-07-26 19:22:03
阅读次数:
81
首先我们要建一个webapi工程,然后下载两个插件: 1,Nest 2,Elasticsearch.Net 下载后,下面就上代码了,首先是elasticsearchHelp帮助类 using Elasticsearch.Net; using Nest; using System; namespace ...
分类:
Web程序 时间:
2020-07-26 19:09:34
阅读次数:
117
向Kubernetes集群域名服务器中插入自定义的解析记录-corednssystemNAMEDATAAGEcoredns19d?编辑这个configmap:~?kub
分类:
Web程序 时间:
2020-07-26 16:05:35
阅读次数:
148
1 案例1:部署Ansible 1.1 问题 本案例要求先快速搭建好一个Ansible平台,并测试环境,要求如下: 创建实验主机(控制端和被控制端) 配置SSH实验环境 安装Ansible自动化软件 修改Ansible配置 1.2 方案 准备如表-1所示的实验环境,操作系统为RHEL8,配置主机名称 ...
分类:
其他好文 时间:
2020-07-26 15:27:27
阅读次数:
79
主机 echo "sh /root/iptables.sh" >> /etc/rc.local echo "mount /dev/sdb /data" >> /etc/rc.local chmod +x /etc/rc.d/rc.local 1.文件系统配置新部署MongoDB集群,应部署与cent ...
分类:
数据库 时间:
2020-07-26 15:21:19
阅读次数:
122