ES的默认的很多参数都是不需要改的,当遇到性能问题时首先应该考虑的是增加节点,和优化数据结构。下面列举一些需要注意的配置项,首先是一般大家都知道的配置项: cluster.name: elasticsearch_production 集群名称还是要改一下,不要使用默认的,万一在哪个内网,然后一台测试 ...
分类:
其他好文 时间:
2016-05-05 22:40:09
阅读次数:
1144
1. order by Hive中的order by跟传统的sql语言中的order by作用是一样的,会对查询的结果做一次全局排序,所以说,只有hive的sql中制定了order by所有的数据都会到同一个reducer进行处理(不管有多少map,也不管文件有多少的block只会启动一个reduc ...
分类:
其他好文 时间:
2016-05-05 16:02:24
阅读次数:
736
1.Cassandra操作本文档操作都是在单数据中心,Vnode上操作1.1.添加节点到集群中1.1.1.添加非seed单节点1.在新节点上安装Cassandra,但不要启动2.修改cassandra.yaml文件:cluster_name–新节点加入集群名称listen_address/rpc_address–新节点IPseed_provider–集群seeds列表3..
分类:
其他好文 时间:
2016-05-04 19:24:15
阅读次数:
495
Linux HA Cluster高可用服务器集群,所谓的高可用不是主机的高可用,而是服务的高可用。 什么叫高可用:一个服务器down掉的可能性多种多样,任何一个可能坏了都有可能带来风险,而服务器离线通常带来的代价是很大的,尤其是web站点,所以当某一台提供服务的的服务器down掉不至于服务终止的就叫 ...
分类:
系统相关 时间:
2016-05-04 01:14:48
阅读次数:
196
#!/bin/bash#Author:laocao#Date:2016/05/03#Revision:1.0if[!-f"/etc/yum.repos.d/mariadb.repo"];thenecho"[mariadb]">>/etc/yum.repos.d/mariadb.repoecho"name=MariaDB">>/etc/yum.repos.d/mariadb.repoecho"baseurl=http://yum.mariadb.org/10.0/centos6-amd6..
分类:
数据库 时间:
2016-05-03 12:53:26
阅读次数:
332
前一段时间,部门接入了新业务,由于业务量小,架构非常简单,采用了最简单的LNMP架构,整个项目是交给一个刚毕业的RD负责的,这是背景。 上线前半天,服务平稳运行。下午的时候,开始收到大量报警:No host could be connected in the cluster。第一反应:mysql服务 ...
分类:
其他好文 时间:
2016-04-30 17:00:41
阅读次数:
201
Redis3.0版本之后支持Cluster,具体介绍redis集群我就不多说,了解请看redis中文简介。 首先,直接访问redis.io官网,下载redis.tar.gz,现在版本3.0.3,我下面已经在虚拟机启动了两个linux来部署redis。 1. 下载和解包 cd /usr/local/ ...
分类:
其他好文 时间:
2016-04-29 21:54:01
阅读次数:
200
sort by 不受 hive.mapred.mode 的值是否为 strict 和 nostrict 的影响。sort by 的数据只能保证在同一个 Reduce 中的数据可以按指定字段排序;DISTRIBUTE BY 排序查询 按照指定的字段对数据划分到不同的输出 Reduce 文件中;CLUSTER BY 查询 cluster by 除了具有 distribute by 的功能外还兼...
分类:
其他好文 时间:
2016-04-29 18:53:43
阅读次数:
174
高可用性集群(High availability cluster,HAC),它是利用集群中系统
的冗余,当系统中某台机器发生损坏的时候,其他后备的机器可以迅速的接替它来启动服务,等待故障机的维修和返回。最大限度的保证集群中服务的可用性。这类系统一般在银行,电信服务这类对系统可靠性有高的要求的领域有着广泛的应用。
数据库集群的现状
数据库集群是将计算机集群技术引入到数据库中来实现的,有数据库...
分类:
数据库 时间:
2016-04-29 17:07:52
阅读次数:
232
1 背景 1
1.1 MVCC:Snapshot
Read vs Current Read 2
1.2 Cluster
Index:聚簇索引 3
1.3 2PL:Two-Phase
Locking 3
1.4 Isolation
Level 4
2 一条简单SQL的加...
分类:
数据库 时间:
2016-04-29 16:45:30
阅读次数:
266