前言相信Docker技术大家都有所了解,单个Docker能发挥的作用毕竟有限,也不便于管理,所以Docker得组集群来使用才能发挥强大的技术优势。既然要组集群那就涉及诸如Docker的资源调度、管理等等一系列问题。目前涉及Docker集群的三个主要的技术无外乎Swarm、Kubernetes、Mesos三种。从本文开始作者将会一一实践这几种主要的Docker集群技术,话不多说,现在开始。注意:作者
分类:
其他好文 时间:
2018-02-28 11:20:26
阅读次数:
178
说明:基于环境mesos+marathon+docker+prometheus+grafana监控tomcat一、配置环境(1)dockerfilefromtomcatCOPYtomcat-users.xml/usr/local/tomcat/conf/COPYserver.xml/usr/local/tomcat/conf/COPYcontext.xml/usr/local/tomcat/web
分类:
其他好文 时间:
2018-02-26 13:32:10
阅读次数:
1895
mesos原理与架构 首先,再次需要强调 Mesos 自身只是一个资源调度框架,并非一整套完整的应用管理平台,所以只有 Mesos 自己是不能干活的。但是基于 Mesos,可以比较容易地为各种应用管理框架或者中间件平台(作为 Mesos 的应用)提供分布式运行能力;同时多个框架也可以同时运行在一个 ...
分类:
其他好文 时间:
2018-02-13 12:27:17
阅读次数:
211
听过不少人在讨论 Mesos,然而并不是很明白 Mesos 到底能够解决什么问题,使用场景是怎样的,周伟涛(国内较早一批接触使用 Docker,Mesos 等技术的开发者)用一句话形容它, Mesos 能够管理每台机器的 CPU,内存等资源,让你像操纵单个资源池一样来操纵整个数据中心。 周伟涛,现数 ...
分类:
其他好文 时间:
2018-01-13 11:04:43
阅读次数:
177
TaskScheduler 原理: 1. DAGScheduler 在提交Taskset给底层调度器的时候是面向接口TaskScheduler的, 这符合面向对象中依赖抽象原则,带来底层资源调度器的可插拔性, 导致Spark可以运行在众多的资源高度器模式上。例如: Standalone, Yarn, ...
分类:
其他好文 时间:
2017-12-24 20:10:34
阅读次数:
147
为了测试 mesos,搞了一个 centos7.1,使用最小化安装,然后自己安装了 net-tools,“开发工具”集。后来想装一下 DCOS Cli工具,结果发现 python 的 pip 不可用。 搜了一下,发现 Centos7自动的 python 版本为2.7.5,不带 openssl 加密, ...
分类:
编程语言 时间:
2017-12-15 15:05:59
阅读次数:
145
一.安装准备 本文档以mesos+marathon+zk高可用集群安装为例进行说明。 各主机配置 主机 IP 安装模块 host1 192.168.10.1 zk、mesos_m、mesos_s、marathon host2 192.168.10.2 zk、mesos_m、mesos_s host3 ...
分类:
其他好文 时间:
2017-11-27 16:47:15
阅读次数:
180
分布式系统实践 1. 如何把Docker镜像分发速度提升90+% https://mp.weixin.qq.com/s/eRBLAF0Kfcc5Uwu_55xghA 摘要: docker镜像的下载和普通的文件传输并没有本质的区别, 提高大规模文件传输效率的办法就是BT了, 这篇文章介绍了腾讯基于BT ...
分类:
其他好文 时间:
2017-11-10 21:48:15
阅读次数:
237
在技术方面,我自己热衷于 Open Source,写了很多 Open Source 的东西,擅长的是 Infrastructure 领域。Infrastructure 领域现在范围很广,比如说很典型的分布式 Scheduler、Mesos、Kubernetes,另外它和 Microservices ...
分类:
数据库 时间:
2017-10-16 16:43:32
阅读次数:
193
今天试用fnproject 之后自己有些思考,后面继续解决1. 目前测试是强依赖 dockerhub 的,实际可能不是很方便2. 如何与k8s 、mesos、docker swarm 集成3. security 如何做4. 现有基础设施改造5. 监控、服务追踪、日志的处理6. 持续集成如何做(版本,... ...
分类:
其他好文 时间:
2017-10-05 18:48:56
阅读次数:
797