主从模式 主节点有单点故障问题：没有主从自动切换，没有failover，主机down掉了的话，整个数据变成只读。并且需要一台机单独做索引，浪费资源，所有数据都需要在这台机器上单独存在一份，索引变化较大的时候同步会占用很大的带宽和资源。 配置文件改动：改动了solrconfig.xml最终还是要手动上 ...
分类：
其他好文 时间：
2016-06-24 12:12:23
阅读次数：
161
本篇博客将围绕Hadoop伪分布安装+MapReduce运行原理+基于MapReduce的KNN算法实现这三个方面进行叙述。
（一）Hadoop伪分布安装1、简述Hadoop的安装模式中–伪分布模式与集群模式的区别与联系.
Hadoop的安装方式有三种:本地模式,伪分布模式,集群(分布)模式,其中后两种模式为重点,有意义
伪分布:如果Hadoop对应的Java进程都运行在一个物理机器上,称为伪...
分类：
编程语言 时间：
2016-06-16 14:41:00
阅读次数：
370
问题描述： 在集群模式下更改节点后，启动集群发现 datanode一直启动不起来。 我集群配置：有5个节点，分别为master slave1-5 。 在master以Hadoop用户执行：start-all.sh jps查看master节点启动情况： NameNode JobTracker Seco ...
分类：
其他好文 时间：
2016-06-13 13:21:53
阅读次数：
180
前一篇文章介绍了Zookeeper的单机模式的安装及应用，但是Zookeeper是为了解决分布式应用场景的，所以通常都会运行在集群模式下。今天由于手头机器不足，所以今天打算在一台机器上部署三个Zookeeper服务来组成一个Zookeeper集群。这里解压Zookeeper的安装包到/opt目录下， ...
分类：
其他好文 时间：
2016-05-27 16:31:23
阅读次数：
226
转载自:http://www.cnblogs.com/sunddenly/p/4018459.html 一、Zookeeper的搭建方式 Zookeeper安装方式有三种，单机模式和集群模式以及伪集群模式。 ■ 单机模式：Zookeeper只运行在一台服务器上，适合测试环境；■ 伪集群模式：就是在一... ...
分类：
其他好文 时间：
2016-05-25 09:26:12
阅读次数：
173
1 Manila Mitaka版本概述 NetApp工程师介绍到，Manila Mitaka发布版本Driver个数达到了18个， M版本新加入14家公司（中国公司继华为之后又有99cloud等公司加入）， 本版本完成了43个蓝图，主要的蓝图有共享迁移、将扩展API移入核心， 增加了功能测试、QoS ...
分类：
其他好文 时间：
2016-05-23 14:55:48
阅读次数：
225
一、zookeeper
Zookeeper 是 Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等
Zookeeper服务器集群规模不小于3个节点，要求各服务器之间系统时间要保持一致。ZooKeeper的搭建是为了后面HBase的使用。
二、集群模式搭建
我的集群是Hadoop...
分类：
其他好文 时间：
2016-05-13 03:14:19
阅读次数：
134
本文环境如下：
操作系统：CentOS 6 32位
JDK版本：1.8.0_77 32位
Kafka版本：0.9.0.1(Scala 2.11)
1. 所需要的环境Kafka需要以下运行环境：
Java 安装参考CentOS 6使用rpm方式安装JDK8
Zookeeper 安装参考：CentOS下ZooKeeper单机模式、集群模式安装2. 下载、解压Kafka安装包Ka...
分类：
其他好文 时间：
2016-05-12 17:54:50
阅读次数：
282
本文环境如下：
操作系统：CentOS 6 32位
JDK版本：1.8.0_77 32位
Kafka版本：0.9.0.1(Scala 2.11)
接上篇 Kafka单机、集群模式安装详解(一)6. 单节点多Broker模式Kafka使用可以有多种模式，包括单节点单Broker,单节点多Broker,多节点多Broker。
这里我们简单区分一下：
单节点单Broker：在单台机子...
分类：
其他好文 时间：
2016-05-12 17:54:31
阅读次数：
199
1、考虑数据规划，存储空间有多少等等。 按照公式估算； 字符集、排序、页面大小创建后不能更改。数据存储空间规划，特别是集群模式的部署 LUN Plan要点。 IQ使用的磁盘，物理上必须要与其它应用隔离； RAID 5/6 不要用LVM 尽量分散I/O1、建议先打补丁再建库。2、准备文件系统 建议给数... ...
分类：
数据库 时间：
2016-04-19 17:18:00
阅读次数：
307
