Listener 1.是什么: perform actions based on events occurring within the scheduler. 2.分类:a.TriggerListeners ; b.JobListeners ; c.SchedulerListeners Trigge ...
分类:
其他好文 时间:
2019-01-03 19:24:45
阅读次数:
217
YARN ResourceManager 8032 yarn.resourcemanager.address RM的applications manager(ASM)端口YARN ResourceManager 8030 yarn.resourcemanager.scheduler.address ...
分类:
其他好文 时间:
2019-01-02 12:44:44
阅读次数:
265
一,分布式文件系统理论基础 1.1 分布式文件系统出现 计算机通过文件系统管理,存储数据,而现在数据信息爆炸的时代中人们可以获取的数据成指数倍的增长,单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式,已经不能满足目前的需求。 分布式文件系统可以有效解决数据的存储和管理难题,将固定于某个地点的 ...
分类:
其他好文 时间:
2019-01-01 00:16:56
阅读次数:
276
Kubernetes集群包含有节点代理kubelet和Master组件(APIs, scheduler, etc),一切都基于分布式的存储系统 以下是摘自 凌风探梅的总结 .什么是kubernetes 首先,他是一个全新的基于容器技术的分布式架构领先方案。Kubernetes(k8s)是Google ...
分类:
其他好文 时间:
2018-12-30 13:20:14
阅读次数:
254
1.安装服务组件 yum install openstack-nova-api openstack-nova-conductor openstack-nova-console openstack-nova-novncproxy openstack-nova-scheduler openstack-n ...
分类:
其他好文 时间:
2018-12-27 03:34:31
阅读次数:
634
两台服务器 centos-master 172.16.120.189 centos-minion 172.16.120.190 master上运行etcd, kube-apiserver, kubecontroller-manager和kube-scheduler minion上运行kubelet, ...
分类:
Web程序 时间:
2018-12-26 17:53:09
阅读次数:
180
Engine:引擎,处理整个系统的数据流处理、触发事务,是整个框架的核心。 Item:项目,定义爬虫结果的数据结构,爬去的数据被赋值为该item对象。 Scheduler:调度器,接受引擎发过来的请求并将其加入队列中,在引擎再次请求时将请求提供给引擎。 Downloader:下载器,下载网页内容,并 ...
分类:
其他好文 时间:
2018-12-25 20:19:34
阅读次数:
126
1.安装配置glusterfs基础配置:centos7 关闭firewalld/selinux配置/etc/hosts和hostname 安装glusterfs 准备存储盘 glusterfs 配置券 测试 glusterfs 略 安装docker 安装插件、配置测试 ...
分类:
其他好文 时间:
2018-12-19 20:55:08
阅读次数:
354
1、在单处理器的多进程系统中,进程什么时候占有处理器以及决定占用时间的长短是由( )决定的。 A、进程运行时间 B、进程的特点和进程调度策略 C、进程执行的代码 D、进程完成什么功能 进程调度的时机与进程特点有关,如进程是否为CPU繁忙型还是I/O繁忙型、自身的优先级等。但是仅这些特点是不够的,能否 ...
分类:
其他好文 时间:
2018-12-17 17:37:30
阅读次数:
623