操作系统部分 1、进程和线程的区别 1、进程是资源分配的最小单位，线程是程序执行的最小单位（资源调度的最小单位） 2、进程有自己的独立地址空间，每启动一个进程，系统就会为它分配地址空间，建立数据表来维护代码段、堆栈段和数据段，这种操作非常昂贵。 而线程是共享进程中的数据的，使用相同的地址空间，因此C ...
分类：
其他好文 时间：
2020-03-13 10:16:43
阅读次数：
100
一、背景Kubernetes是目前最为流行、成为事实标准的容器集群管理平台，为容器化应用提供了集群化部署运行、自动资源调度，和动态水平伸缩等一系列完整功能。虽然Kubernetes平台本身已经实现了应用状态的实时监控，但是监控的指标和方式还是比较基础，难以满足各种复杂和个性化的监控管理需求。因此，我们需要在Kubernetes的基础上，增加独立的、不影响现有应用集群的架构和部署的，而且功能全面、易
分类：
Web程序 时间：
2020-03-04 23:35:56
阅读次数：
144
作为北斗第七星，瑶光自古就可用来判断四季更迭、引向定时。而作为全新发布的智能云操作系统，瑶光智慧云脑又是如何做到统领云上各类资源、实现租户需求与资源供应之间最佳匹配的呢？在华为云瑶光实验室、华为云算法创新实验室里，我们找到了答案。 #初识资源调度# 云OS：我太“南”了 依托虚拟化技术，我们得以将数 ...
分类：
其他好文 时间：
2020-02-29 18:40:22
阅读次数：
52
scheudler是kubernetes中的核心组件，负责为用户声明的pod资源选择合适的node,同时保证集群资源的最大化利用，这里先介绍下资源调度系统设计里面的一些基础概念
分类：
Web程序 时间：
2020-02-16 00:55:48
阅读次数：
90
一 Kubernetes概述 Kubernetes是一个全新的基于容器技术的分布式架构领先方案。Kubernetes(k8s)是Google开源的容器集群管理系统（谷歌内部:Borg）。在Docker技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能，提高了大规模 ...
分类：
Web程序 时间：
2020-01-30 18:52:51
阅读次数：
87
K8s: 开源的容器集中管理系统，使用go语言开发，用于管理云平台中多个主机上的容器化应用 Kubernetes特性: K8s的目标是让部署容器化的应用简单并且高效提供了资源调度、部署管理、服务发现、扩容缩容、监控，维护等一整套功能。成为跨主机集群的自动部署、扩展以及运行应用程序容器的平台。 1.自 ...
分类：
其他好文 时间：
2020-01-30 00:00:05
阅读次数：
122
MapReduce与spark MapReduce： 操作单一，只有map，reduce spark：提供多种操作：过滤，分组，排序.... （一）spark生态环境： Mesos和YARN都是资源调度管理器 HDFS：分布式系统存储组件 S3：亚马逊提供的云端的简单的存储服务 Tachyon：基于 ...
分类：
其他好文 时间：
2020-01-28 20:53:14
阅读次数：
68
1.什么是进程 进程：正在进行的过程或者一个任务，是系统进行资源调度和分配的基本单元。进程是操作系统中最基本、最重要的概念。是多道程序系统出现后，为了刻画系统内部出现的动态情况，描述系统内部各道程序的活动规律引进的一个抽象的概念，所有多道程序设计操作系统都建立在进程的基础上。 进程与程序的区别：程序 ...
分类：
编程语言 时间：
2020-01-21 21:35:14
阅读次数：
86
一：简介 1.什么是k8s？ k8s是一个docker容器管理工具 它是一个全新的基于容器技术的分布式架构领先方案，是开源的容器集群管理系统。 在docker的基础上，为容器化的应用提供部署运行，资源调度，服务发现和动态伸缩等一系列完整功能 2. k8s的优势： a，容器编排 b，轻量级 c，开源 ...
分类：
其他好文 时间：
2020-01-05 15:30:11
阅读次数：
82
前面也说到过的Yarn是hadoop体系中的资源调度平台。所以在整个hadoop的包里面自然也是有它的。这里我们就简单介绍下，并配置搭建yarn集群。 首先来说Yarn中有两大核心角色Resource Manager和Node Manager。 Resource Manager负责接收用户提交的分布 ...
分类：
其他好文 时间：
2020-01-04 01:18:41
阅读次数：
76
