本节课主要介绍如何在 Serverless Kubernetes 集群中低成本运行 Spark 数据计算。首先简单介绍下阿里云 Serverless Kubernetes 和 弹性容器实例 ECI 这两款产品;然后介绍 Spark on Kubernetes;最后进行实际演示。
分类:
其他好文 时间:
2020-12-17 12:22:18
阅读次数:
2
kubeadm 是官方社区推出的一个用于快速部署 kubernetes 集群的工具,这个工具能通过两条指令完成一个 kubernetes 集群的部署: 第一、创建一个 Master 节点 kubeadm init 第二, 将 Node 节点加入到当前集群中 $ kubeadm join <Maste ...
分类:
其他好文 时间:
2020-12-17 12:17:27
阅读次数:
2
一、ServiceAccount1.ServiceAccount介绍首先Kubernetes中账户区分为:UserAccounts(用户账户)和ServiceAccounts(服务账户)两种,它们的设计及用途如下:UserAccount是给kubernetes集群外部用户使用的,例如运维或者集群管理人员,使用kubectl命令时用的就是UserAccount账户;UserAccount是全局性。在
分类:
Web程序 时间:
2020-11-26 14:59:05
阅读次数:
9
1、安装要求在开始之前,部署Kubernetes集群机器需要满足以下几个条件:五台机器,操作系统CentOS7.5+(mini)硬件配置:2GBRAM,2vCPU+,硬盘30GB+集群中所有机器之间网络互通,且可访问外网。2、安装步骤角色IPk8s-lb192.168.50.100master1192.168.50.128master2192.168.50.129master3192.168.50
分类:
其他好文 时间:
2020-11-25 12:13:24
阅读次数:
5
部署高可用kubernetes集群-1.9.2hujianxiong2018年03月26日308次浏览1.kubernetes高用可架构loadbalancerloadbalancer2.环境规划k8s-v192-systemk8s-v192-systemk8s-v192-clusterk8s-v192-cluster3.准备工作修改主机名,kubernetes集群会识别主机名,确保主机名唯一(每
分类:
其他好文 时间:
2020-11-18 13:11:37
阅读次数:
10
对于生产环境,需以高可用的配置安装 Rancher,确保用户始终可以访问 Rancher Server。当安装在Kubernetes集群中时,Rancher将与集群的 etcd 集成,并利用Kubernetes 调度实现高可用。 为确保高可用,本文所部署的 Kubernetes 集群将专用于运行 R ...
分类:
其他好文 时间:
2020-11-17 12:37:47
阅读次数:
6
二、陈述式资源管理2.1管理K8s核心资源的三种方法:陈述式管理方法-主要依赖于命令行CLI工具进行管理声明式管理方法-主要依赖统一资源配置清(manifest)单进行管理GUI式管理方法-主要依赖图形化操作界面(web界面)进行管理2.2陈述式资源管理的方法kubernetes集群管理集群资源的唯一入口是通过相应的方法调用apiserver的接口kubectl是官方的CLI命令行工具,用于api
分类:
其他好文 时间:
2020-11-11 16:18:45
阅读次数:
8
当我们为生产环境在本地设置Kubernetes(k8s)集群时,建议以高可用性部署它。高可用性意味着在HA中安装Kubernetes主节点或工作节点。在本文中,我将演示如何使用kubeadm实用程序设置高可用性的Kubernetes集群。为了进行演示,我使用了五个具有以下详细信息的CentOS7系统:k8s-master-1–最低CentOS7–192.168.1.40–2GBRAM,2vCPU,
分类:
Web程序 时间:
2020-11-06 01:30:38
阅读次数:
26
k8s故障处理6443是Kubernetes集群APIServer的端口,因此猜测是APIServer挂掉了,因此查看正在运行的进程$ps-aux|grep"kube"发现果然没有有关的进程,因此重启相关的服务systemctlrestartkube-apiserver启动失败kubelet.service失败,用journalctl-xefukubelet搜索报错日志可以看到
分类:
其他好文 时间:
2020-11-02 10:07:54
阅读次数:
27
在kubernetes集群中,每个Node节点都会启动kubelet进程,用来处理Master节点下发到本节点的任务,管理Pod和其中的容器。kubelet会在API Server上注册节点信息,定期向Master汇报节点资源使用情况,并通过cAdvisor监控容器和节点资源。可以把kubelet理 ...
分类:
其他好文 时间:
2020-10-22 23:06:45
阅读次数:
49