在linux上创建基于kvm的虚拟化系统的意义就是充分利用资源,做云计算集群。做集群,就涉及到虚拟机的copy,创建的虚拟机的img文件不宜过大,否则在一个集群中copy可能消耗大量的时间及资源。而且直接把虚拟机创建这么大也不建议。于是先创建个较小的虚拟机img文件,然后再在虚..
分类:
其他好文 时间:
2014-09-12 17:25:46
阅读次数:
584
1、查看是否有mod_proxy_http.so、mod_proxy_balancer.so、mod_proxy.so三个模块#ll/usr/local/apache2/modules2、加载模块#cd/usr/local/src/httpd-2.2.23/modules/proxy/#/usr/local/apache2/bin/apxs-c-imod_proxy.cproxy_util.c#/usr/local/apache2/bin/apxs-c-imod_proxy_..
分类:
其他好文 时间:
2014-09-12 17:24:24
阅读次数:
176
对于90%以上想学习Spark的人而言,如何构建Spark集群是其最大的难点之一,为了解决大家构建Spark集群的一切困难,家林把Spark集群的构建分为了四个步骤,从零起步,不需要任何前置知识,涵盖操作的每一个细节,构建完整的Spark集群。从零起步,构建Spark集群经典四部曲:第一步..
分类:
其他好文 时间:
2014-09-12 15:25:14
阅读次数:
240
第二步:安装每个软件安装Vmware虚拟机点击“VMware-workstation-full-9.0.2-1031769”可执行文件,如下图所示:点击“Next”进入下一步:我们选择“Custom”进入下一步;2.选择所有的功能,如下所示:我们选择“Custom”进入下一步;2.选择所有的功能,如下所示:点击”Next”..
分类:
其他好文 时间:
2014-09-12 15:22:04
阅读次数:
269
MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践
Mysql作为目前世界上使用最广泛的免费数据库,相信所有从事系统运维的工程师都一定接触过。但在实际的生产环境中,由单台Mysql作为独立的数据库是完全不能满足实际需求的,无论是在安全性,高可用性以及高并发等各个方面。
因此,一般来说都是通过 主从复制(Master-Slave)的方式来同步数据,再通过读写分...
分类:
数据库 时间:
2014-09-12 15:13:13
阅读次数:
406
我们系统中原有的基于spring3自带的task,并使用注解方式制定调度策略。单由于需求需要动态定制添加、修改、删除任务。spring自带的task无法满足需求。所以考虑使用spring+quartz。网上很多人说spring3+才能使用quartz2.+的版本,正好我们使用的spring版本为sp...
分类:
编程语言 时间:
2014-09-12 15:02:33
阅读次数:
165
一个分布式系统基础架构,由Apache基金会所开发。
用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。
[1] Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的硬件上;而且它提供高吞吐量(high throughput)来访问应用程...
分类:
其他好文 时间:
2014-09-12 13:33:03
阅读次数:
284
./bin/spark-shell --master spark://MASTER:PORT启动集群模式:MASTER=spark://`hostname`:7077 bin/spark-shellbin/spark-shell --master spark://es122:7077单机模式:bin...
分类:
其他好文 时间:
2014-09-12 11:52:33
阅读次数:
183
1、垃圾回收在conf/spark-env.sh中添加SPARK_JAVA_OPTS=-verberos:gc -XX;+PrintGCDetails -XX:+PrintGCTimeStamps如果发现集群耗费过多时间在垃圾回收上,可以通过spark.storage.memoryFaction调低...
分类:
其他好文 时间:
2014-09-12 11:35:43
阅读次数:
234
问题现象
计划在CentOS5.6(64bit)操作系统上搭建Oracle11g集群,前期使用Red Hat5(32bit)的asm包,后下载src包,安装未果。重新下载asm包,经过正确安装asm包后完成asm的创建。问题不大,却由于版本思路定位不正确,造成过多无用操作。
操作流程
1、安装asm包,创建asm磁盘时报错;
2、下载src包,尝试安装,未果;
3、到官网下载as...
分类:
数据库 时间:
2014-09-12 10:15:43
阅读次数:
406