码迷,mamicode.com
首页 >  
搜索关键字:分布式 hadoop 集群    ( 51515个结果
教你一招:让集群慢节点无处可藏
摘要:GaussDB在大规模集群上运行的过程中,随着时间推移,部分节点可能会出现性能严重下降的情况。此时这些节点仍然能对外提供服务,但响应明显变慢,处理同样的请求所需时间较其他正常节点大很多,从而影响了整个集群的性能。这样的节点称为“亚健康节点”,或“慢节点”。 本文分享自华为云社区《GaussDB ...
分类:其他好文   时间:2021-06-02 15:41:25    阅读次数:0
2、linux Hadoop集群环境配置ssh无密码验证
集群网络配置 分别设置修改主机名 master slave1 slave2 hostnamectl set-hostname 名字 分别配置/etc/hosts文件 查看openssh和rsync安装 rpm -qa | grep 名字 切换到Hadoop用户 各节点生成秘钥 ssh-keygen ...
分类:系统相关   时间:2021-06-02 15:27:52    阅读次数:0
Spark任务提交和执行流程
本文转自:https://www.cnblogs.com/chhyan-dream/p/12013463.html 1、概述 为了更好地理解调度,我们先看一下集群模式的Spark程序运行架构图,如上所示: 2、Spark中的基本概念 1、Application:表示你的程序 2、Driver:表示m ...
分类:其他好文   时间:2021-06-02 15:22:12    阅读次数:0
第140天学习打卡(Docker --link 自定义网络 网络连通 部署Redis集群 发布SpringBoot镜像)
--link 思考一个场景,我们编写了一个微服务器, database url=ip; 项目不重启,数据库ip换掉了,我们希望可以处理这个问题,可以名字来进行访问容器? [root@kuangshen /]# docker exec -it tomcat02 ping tomcat01 ping: ...
分类:编程语言   时间:2021-06-02 14:52:05    阅读次数:0
kuberctl与kubeconfig关系和命令使用
1. kubeconfig配置文件 kubectl使用kubeconfig认证文件连接K8s集群,使用kubectl config指令生成kubeconfig文件。 2. kubectl管理命令概要 官方文档参考地址:https://kubernetes.io/zh/docs/reference/k ...
分类:其他好文   时间:2021-06-02 14:42:54    阅读次数:0
namespace 命名空间
1. namespace命名空间 命名空间(Namespace):kubernetes蒋资源对象逻辑上隔离,从而形成多个虚拟集群 应用场景: 根据不同团队划分命名空间 根据项目划分命名空间 kubectl_get namespace default:默认命名空间 kube-system:k8s系统方 ...
分类:其他好文   时间:2021-06-02 14:39:41    阅读次数:0
Flink可靠性的基石-checkpoint机制详细解析
Flink可靠性的基石-checkpoint机制详细解析 Checkpoint介绍 checkpoint机制是Flink可靠性的基石,可以保证Flink集群在某个算子因为某些原因(如 异常退出)出现故障时,能够将整个应用流图的状态恢复到故障之前的某一状态,保 证应用流图状态的一致性。Flink的ch ...
分类:其他好文   时间:2021-06-02 14:37:17    阅读次数:0
hadoop实践
hadoop 1.0 1. 创建用户hadoop 2. 下载: curl -o hadoop-1.2.1-bin.tar.gz https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz 3. ...
分类:其他好文   时间:2021-06-02 14:05:53    阅读次数:0
# ZooKeeper应用场景
ZooKeeper 是一个高可用的分布式数据管理与系统协调框架。基于对 Paxos 算法的实现,使该框架保证了分布式环境中数据的强一致性,也正是基于这样的特性,使得 ZooKeeper 解决很多分布式问题。 下面对 ZK 的应用场景迚行一个分门归类的介绉。 一、数据发布与订阅(配置中心) 发布与订阅 ...
分类:其他好文   时间:2021-06-02 13:47:13    阅读次数:0
HTTP协议详解(真的很经典)
转自:http://blog.csdn.net/gueter/archive/2007/03/08/1524447.aspx Author :Jeffrey 引言 HTTP是一个属于应用层的面向对象的协议,由于其简捷、快速的方式,适用于分布式超媒体信息系统。它于1990年提出,经过几年的使用与发展, ...
分类:Web程序   时间:2021-06-02 13:19:34    阅读次数:0
51515条   上一页 1 ... 18 19 20 21 22 ... 5152 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!