介绍下es的几个概念: cluster 代表一个集群,集群中有多个节点,其中有一个为主节点,这个主节点是可以通过选举产生的,主从节点是对于集群内部来说的。es的一个概念就是去中心化,字面上理解就是无中心节点,这是对于集群外部来说的,因为从外部来看es集群,在逻辑上是个整体,你与任何一个节点的通信和....
分类:
其他好文 时间:
2015-02-10 15:05:44
阅读次数:
179
一.RESET MASTER这个语句可以验证首次配置主机备机是否成功、步骤如下:1. 启动master和 slave,开启replication (即 复制)注:replication (复制) 也是mysql一个重要的技术2.运行一些测试的语句看数据是否能够复制到 slave上面3.当复制运行正常...
分类:
数据库 时间:
2015-02-09 19:58:13
阅读次数:
221
Rails连接远程mongo数据库报错:"Could not connect to a primary node for replica set #]>"配置文件内容如下:development: sessions: default: database: spider h...
分类:
其他好文 时间:
2015-02-09 09:18:25
阅读次数:
189
1、簇概念:是一组表,如果应用程序中的SQL语句经常联结两个或多个表,可以把这些表以簇方式进行创建以改善性能。簇中的表存储在相同的数据块中,并且各个表中的相同的列值只存储一个。簇(Cluster)就是将一组有机联系的表在物理上存放在一起并且相同的关键列的值只存储一份,..
分类:
数据库 时间:
2015-02-08 23:28:42
阅读次数:
462
hadoop版本:Hadoop 2.3.0-cdh5.0.0
sqoop版本:Sqoop 1.4.4-cdh5.0.0
配置好sqooop-env.xml:
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/my/hadoop
#Set path to where hadoop-*-...
分类:
其他好文 时间:
2015-02-08 23:16:27
阅读次数:
364
Cluster讲课的这哥们接下来讲了下Akka Cluster的使用,但是是通过把一个以前讲过的actor 系统改成使用cluster来介绍的Akka cluster. 这部分代码很多,还是直接看视频吧。或者,看这篇文章,Akka Clustering, Step by Step更直白一些,不用事先...
分类:
其他好文 时间:
2015-02-07 11:32:03
阅读次数:
150
K-Means 是一种基于距离的排他的聚类划分方法。K-Means 基本原理:给定划分数量 k。创建一个初始划分,从数据集中随机地选择 k 个对象,每个对象初始地代表了一个簇中心(Cluster Centroid)。对于其他对象,计算其与各个簇中心的距离,将它们划入距离最近的簇。采用迭代的重定位技术...
分类:
编程语言 时间:
2015-02-06 23:05:35
阅读次数:
540
最近在看CBO在不同系统里的实现方式,比如flink里在编译时对plan的CBO优化,以及运行时的CBO:Hive、Apache Calcite(即Optiq)的一些内容。
今天第一次看到DIMMQ的概念,聊聊我的几点看法。
DIMMQ的全称是Discardable In-Memory Materialized Query,提出这个概念,本质上还是为了解决数据重用。只是这次数据的重用不是磁盘上的replication,或是内存里的RDD,而是更细粒度的query级别,具体data set是隐藏在DIMMQ...
分类:
其他好文 时间:
2015-02-06 15:02:52
阅读次数:
164
1、如果数据库配置了自动存储管理(ASM),应该先删除聚集同步服务CSS(Cluster Synchronization Services).删除CSS服务的方法是在DOS命令行中执行如下命令: localconfig delete2、在“服务”窗口中停止oracle的所有服务。3、在“开始”菜单....
分类:
数据库 时间:
2015-02-06 09:24:29
阅读次数:
197