Hadoop、Yarn、Spark是企业构建生产环境下大数据中心的关键技术，也是大数据处理的核心技术，是每个云计算大数据工程师必修课。大数据时代的精髓技术在于Hadoop、Yarn、Spark，是大数据时代公司和个人必须掌握和使用的核心内容。Hadoop、Yarn、Spark是Yahoo！、阿里淘宝...
分类：
移动开发 时间：
2014-09-13 17:03:45
阅读次数：
328
数据中心网络是云计算的核心基础设施数据中心的拓扑设计代表方案：Fat-TreeFat-Tree采用3层拓扑结构进行交换机级联,接入交换机与汇聚交换机被划分为不同的集群，集群中每台接入交换机都与每台汇聚交换机相连，每台汇聚交换机与部分核心交换机相连。典型的Fat-Tree采用1G商用交换机。数据中心网...
分类：
其他好文 时间：
2014-09-13 00:42:04
阅读次数：
246
在上文Docker源码分析之——Docker Daemon启动 中，介绍了Docker Daemon进程的启动。Docker Daemon可以认为是一个Docker作为Server的运行载体，而真正发送关于docker container操作的请求的载体，在于Docker Client。本文从Docker源码的角度，分析Docker Client启动与执行请求的过程。...
分类：
其他好文 时间：
2014-09-12 20:45:54
阅读次数：
251
在linux上创建基于kvm的虚拟化系统的意义就是充分利用资源，做云计算集群。做集群，就涉及到虚拟机的copy，创建的虚拟机的img文件不宜过大，否则在一个集群中copy可能消耗大量的时间及资源。而且直接把虚拟机创建这么大也不建议。于是先创建个较小的虚拟机img文件，然后再在虚..
分类：
其他好文 时间：
2014-09-12 17:25:46
阅读次数：
584
块存储是其中重要的一部分。块存储为虚拟机提供了持久化的存储。本文主要分析了分布式块存储系统sheepdog，研发OpenStack与sheepdog的整合方案，并在系统实现中总结了其性能优化，最后给出了默认配置的块存储以及优化之后的块存储性能对比测试与分析。...
分类：
其他好文 时间：
2014-09-12 17:14:13
阅读次数：
321
Q1：docker成熟度如何？Docker是2013年和2014年最火爆的云计算开源项目；Baidu公司是中国使用Docker最为深入和最大规模的公司，线上稳定运行数十万个Docker容器，目前已经使用Docker全面全面升级了自己的BAE，升级后的BAE无论是性能还是业务表现均超出预期；Q2：Docker与云计算..
分类：
其他好文 时间：
2014-09-12 15:27:54
阅读次数：
198
对于90%以上想学习Spark的人而言，如何构建Spark集群是其最大的难点之一，为了解决大家构建Spark集群的一切困难，家林把Spark集群的构建分为了四个步骤，从零起步，不需要任何前置知识，涵盖操作的每一个细节，构建完整的Spark集群。从零起步，构建Spark集群经典四部曲：第一步..
分类：
其他好文 时间：
2014-09-12 15:25:14
阅读次数：
240
第二步：安装每个软件安装Vmware虚拟机点击“VMware-workstation-full-9.0.2-1031769”可执行文件，如下图所示：点击“Next”进入下一步：我们选择“Custom”进入下一步；2.选择所有的功能，如下所示：我们选择“Custom”进入下一步；2.选择所有的功能，如下所示：点击”Next”..
分类：
其他好文 时间：
2014-09-12 15:22:04
阅读次数：
269
MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践
Mysql作为目前世界上使用最广泛的免费数据库，相信所有从事系统运维的工程师都一定接触过。但在实际的生产环境中，由单台Mysql作为独立的数据库是完全不能满足实际需求的，无论是在安全性，高可用性以及高并发等各个方面。
因此，一般来说都是通过 主从复制（Master-Slave）的方式来同步数据，再通过读写分...
分类：
数据库 时间：
2014-09-12 15:13:13
阅读次数：
406
很早就听说过Maven这个名词，当时就知道是一个项目管理工具，用来管理Jar包，认识的比较肤浅。这次看了下视频，简单学习了下，对其的理解更加深刻了。先来看一下简单的Maven基础知识。 Maven是Apache基金会下的一个用来管理项目的工具。Maven是基于项目对象模型(POM)，可以通过一小段描述信息来管理项目的构建，报告和文档的软件项目管理工具。 SVN大家...
分类：
其他好文 时间：
2014-09-12 15:12:33
阅读次数：
194
