1.进程概念 在用户层面，进程是一次程序的动态运行实例， 在操作系统层面，进程是操作系统进行资源调度和分配的基本单位，每一个进程都有自己独立的地址空间和运行状态。 操作系统为进程创建了一系列的数据结构来管理进程。操作系统会为每个进程创建一个虚拟地址空间和进程控制块。 2.虚拟地址空间 在32位操作系 ...
分类：
系统相关 时间：
2017-03-30 16:57:46
阅读次数：
248
OpenStack云端的资源调度和优化剖析 OpenStack云端的资源调度和优化剖析 OpenStack简介：OpenStack是旨在为公有及私有云的建设与管理提供软件的一个开源项目，采用Apache授权协议，它的核心任务是简化云系统的部署过程，并且赋予其良好的可扩展性和可管理性。它已经在当前的基 ...
分类：
其他好文 时间：
2017-03-27 16:29:29
阅读次数：
188
1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS（分布式文件系统）B.YARN（运算资源调度系统）C.MAPREDUCE（分布式运算编程框架..
分类：
其他好文 时间：
2017-03-27 12:05:23
阅读次数：
405
k8s基本概念Kubernetes是Google开源的容器集群管理系统，基于Docker构建一个容器的调度服务，提供资源调度、均衡容灾、服务注册、动态扩缩容等功能套件，目前最新版本为1.0.6;下面是一张简单的架构图几个重要概念：Pod:在Kubernetes系统中，调度的最小颗粒不是单纯的容器，而是..
分类：
其他好文 时间：
2017-03-22 16:45:42
阅读次数：
272
众所周知, Mesos在运行时使用wDRF（ Dominant Resource Fairness）算法进行一级资源分配, 通过应用程序（Framework）运行时使用资源进行二级资源调度。以此来达到资源分配的公平性和灵活性。但在资源有限的情况下，对于尚未部署的程序如何分配资源？为此Mesos提供了 ...
分类：
其他好文 时间：
2017-03-14 11:49:49
阅读次数：
215
优势： 1）容器托管 提供大规模容器集群管理、资源调度、容器编排、代码构建，屏蔽了底层基础构架的差异，简化了分布式应用的管理和运维。 2）服务发现 为每个服务提供二级域名和端口映射，服务之间可通过内网域名进行访问，不会受容器重启、迁移或扩展的影响。服务之间还可通过环境变量链接起来。 3）存储卷 容器 ...
分类：
其他好文 时间：
2017-03-02 17:01:20
阅读次数：
133
本課主題 Master 资源调度的源码鉴赏 Spark 的 Worker 是基于什么逻辑去启动 Executor 资源调度管理 Master 资源调度的源码鉴赏 當前 Master 必順是 Alive 的方式採用進行資源的調度，一開始的時候會判斷一下狀態，如果不是 Alive 的狀態會直接返回，也就 ...
分类：
其他好文 时间：
2017-02-22 16:40:36
阅读次数：
253
2011年，Twitter发布了开源的分布式流计算系统Storm。四年后，随着用户数量的急剧增加，Twitter每天要处理的事件已经增加到十亿以上。Storm系统应对如此庞大而复杂多样的流数据变得十分困难。为了解决该问题，Twitter公司近期开发了一套全新的流处理系统——Heron。近日，Twit ...
分类：
其他好文 时间：
2017-02-15 14:49:50
阅读次数：
205
Hadoop YARN同时支持内存和CPU两种资源的调度，本文介绍如何配置YARN对内存和CPU的使用。 YARN作为一个资源调度器，应该考虑到集群里面每一台机子的计算资源，然后根据application申请的资源进行分配Container。Container是YARN里面资源分配的基本单位，具有一 ...
分类：
其他好文 时间：
2017-01-25 17:27:28
阅读次数：
229
遗传算法GA的核心代码实现： 最核心： 完整核心代码： 完整的GA算法的工程实现，包括与轮询(RR)算法效果对比： GA-cloudsim.zip ...
分类：
编程语言 时间：
2016-12-30 15:18:43
阅读次数：
1314
