一：任务调度和资源调度的区别: 任务调度是指通过DAGScheduler，TaskScheduler，SchedulerBackend完成的job的调度 资源调度是指应用程序获取资源的调度，他是通过schedule方法完成的 二：资源调度解密 因为master负责资源管理和调度，所以资源调度的方法s ...
分类：
其他好文 时间：
2018-11-15 23:39:36
阅读次数：
252
因为javascript引擎的关系，node.js默认是单线程，一个node.js应用无法利用多核资源。不过有第三方库提供多线程支持，但不是无缝的。node.js是解决I/O瓶颈的(相对于传统技术，同步阻塞调用浪费线程),它并没有提高I/O速度，只是资源调度更高效。如果I/O速度不解决，node.j ...
分类：
Web程序 时间：
2018-11-13 20:38:10
阅读次数：
221
1、什么是Hadoop 1). HADOOP是apache旗下的一套开源软件平台 2). HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理 3). HADOOP的核心组件有 A). HDFS（分布式文件系统） B). YARN（运算资源调度系统） C). M ...
分类：
其他好文 时间：
2018-11-04 19:42:26
阅读次数：
145
Kuberneters系列之介绍篇 1、什么是Kubereters 首先，他是一个全新的基于容器技术的分布式架构领先方案。Kubernetes(k8s)是Google开源的容器集群管理系统（谷歌内部:Borg）。在Docker技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一 ...
分类：
Web程序 时间：
2018-10-28 11:09:55
阅读次数：
361
（一）请分别简单说一说进程和线程以及它们的区别。 进程是具有一定功能的程序关于某个数据集合上的一次运行活动，进程是系统进行资源调度和分配的一个独立单位。 线程是进程的实体，是CPU调度和分派的基本单位，它是比进程更小的能独立运行的基本单位。 一个进程可以有多个线程，多个线程也可以并发执行 如果你对进 ...
分类：
其他好文 时间：
2018-10-19 02:02:04
阅读次数：
155
namenode节点上配置Map/Reduce计算引擎跑在yarn这个资源调度平台上；<property><name>mapreduce.framework.name</name><value>yarn</value></property>namenode配置yarn-site.xml文件指定resourcemanager在m
分类：
其他好文 时间：
2018-10-09 17:06:08
阅读次数：
283
1、什么是hadoop hadoop中有3个核心组件： 分布式文件系统：HDFS —— 实现将文件分布式存储在很多的服务器上 分布式运算编程框架：MAPREDUCE —— 实现在很多机器上分布式并行运算 分布式资源调度平台：YARN —— 帮用户调度大量的mapreduce程序，并合理分配运算资源 ...
分类：
其他好文 时间：
2018-09-22 19:52:16
阅读次数：
169
一、前言 Kubernetes 是Google开源的容器集群管理系统，基于Docker构建一个容器的调度服务，提供资源调度、均衡容灾、服务注册、动态扩缩容等功能套件，目前centos yum源上最新版本为1.5.2。 本文基于Centos7.5构建Kubernetes平台，在正式介绍之前，大家有必要 ...
分类：
Web程序 时间：
2018-09-21 16:58:41
阅读次数：
760
Marathon+Mesos+Docker实战ApacheMesos概述ApacheMesos是一款基于多资源调度的开源集群管理套件，使容错和分布式系统更加容易使用实现，采用Master/Slave结构简化设计，将Master尽可能轻量级，进保存了MesosSlave的状态信息常见集群管理工具工具特点优势ApacheMesos需要独立部署mesos-slave进程；依赖framework的功能；可
分类：
其他好文 时间：
2018-08-21 01:06:30
阅读次数：
282
Marathon+Mesos+Docker实战ApacheMesos概述ApacheMesos是一款基于多资源调度的开源集群管理套件，使容错和分布式系统更加容易使用实现，采用Master/Slave结构简化设计，将Master尽可能轻量级，进保存了MesosSlave的状态信息常见集群管理工具工具特点优势ApacheMesos需要独立部署mesos-slave进程；依赖framework的功能；可
分类：
其他好文 时间：
2018-08-21 01:04:45
阅读次数：
253
