第四步：配置Hadoop伪分布模式并运行Wordcount示例伪分布模式主要涉及一下的配置信息：修改Hadoop的核心配置文件core-site.xml，主要是配置HDFS的地址和端口号；修改Hadoop中HDFS的配置文件hdfs-site.xml，主要是配置replication;修改Hadoo...
分类：
其他好文 时间：
2014-08-25 16:51:54
阅读次数：
267
本文讲述MySQL的Master/Slave集群安装和配置，安装的版本是最新的稳定版本GA 5.6.19。
为了支持有限的HA，我们使用Master/Slave简单的读写分离集群。有限的HA是指当Master不可用时，数据不会丢失，但在Master宕机的情况下是不可写的，必须手工处理故障。如果要支持更高的可用性，可以使用两台Master来做热切换。
Master和Slave的MySQL安装是相...
分类：
数据库 时间：
2014-08-25 15:04:14
阅读次数：
259
LVS参考：http://zh.linuxvirtualserver.org/几个术语：Director：也可以称为调度器，LVS前端设备；realserver：也称为真实内部服务器，是真正在提供服务的；VIP：对外公布的IP，即客户请求进来的IP地址；DIP：调度器和realserver之间通信的...
分类：
其他好文 时间：
2014-08-24 14:08:02
阅读次数：
222
今天碰到的一个 spark问题，困扰好久才解决首先我的spark集群部署使用的部署包是官方提供的spark-1.0.2-bin-hadoop2.tgz部署在hadoop集群上。在运行java jar包的时候使用命令java -jar chinahadoop-1.0-SNAPSHOT.jar chin...
分类：
编程语言 时间：
2014-08-24 08:04:42
阅读次数：
321
部署spark集群使用spark包spark-1.0.2-bin-hadoop2.tgz在spark-shell和java -jar访问hadoop hdfs上的文件写法是有区别的在spark-shell直接使用/user/ning/1.txt 之类的路径，不用加hdfs://host:port 的...
分类：
编程语言 时间：
2014-08-24 08:04:12
阅读次数：
261
一，为什么要使用lighttpd? apache不可以吗？ 在支持纯静态的对象时，比如图片，文件等 ， lighttpd速度更快，更理想 （lighttp 图片处理好，nginx负载均衡好） 至于它和apache的比较，很多文档，大家可以google一下二，从何处下载lighttpd? http:/...
分类：
其他好文 时间：
2014-08-23 21:31:01
阅读次数：
255
1：高可用性集群 强调的是高可用性。2：负载均衡集群 不强调高可用性，强调负载的均衡3：高吞吐集群 注重吞吐量，又叫做SIMD(single instruction multiple data)，每个worker的功能相同，数据不同。4：分布式计算 又叫做MIMD(multiple inst...
分类：
其他好文 时间：
2014-08-23 19:02:41
阅读次数：
251
.net web 使用IIS ARR（Application Request Route）技术实现web的高性能、高可靠、易扩展及负载均衡。ARR的使用请参考 IIS负载均衡-Application Request Route详解 一般应用场景见下图所示，其中一台服务器只做ARR服务器，接受客户端....
分类：
其他好文 时间：
2014-08-23 18:53:21
阅读次数：
225
