任何分布式系统都要面对的事儿就包括扩容,不然分布式系统存在的意义就大打折扣了,这篇就介绍一下对GP进行扩容的准备过程,事实上,扩容的实施是个非常简单的过程,主要要做的就是准备。...
分类:
数据库 时间:
2015-05-21 14:14:02
阅读次数:
279
任何系统的升级都有个量变到质变的过渡:版本相差小的时候,通常很简单,版本相差大的时候,就是一场噩梦。不过版本相差小的时候,大伙儿往往安于现状。本文实际记录从GP4.2.7.2到4.3.5.0的升级过程,从版本号看相差不大,但是GP的版本命名中,第二位的变化就已经是大升级了。另需说明的是,本文升级的GP数据库规模不小,用户较多,管理混沌,在加上GP实在是有点儿脆弱(相比oracle等),所以遇到了较多...
分类:
数据库 时间:
2015-05-18 16:49:57
阅读次数:
266
Greenplum的gpcheckcat是用来检查system catalog的一致性的命令,其中有专门针对磁盘文件的检查($GPHOME/bin/lib/gpcheckcat -R persistent -p 5432 databasename),主要是对于system catalog里关于磁盘文件的记录与实际磁盘文件的情况的一致性检查。本文结合一个实际错误介绍如何解决这类元数据错误。...
分类:
其他好文 时间:
2015-05-15 09:11:29
阅读次数:
400
Greenplum的元数据错误也会影响到数据备份过程,在使用pg_dump进行数据结构备份时,会由于分布策略的缺失导致备份失败,本文介绍此错误的解决办法。...
分类:
其他好文 时间:
2015-05-14 12:00:19
阅读次数:
619
Greenplum的可靠性还是没法和传统商业数据库相比,它跑着跑着就会把自己的元数据给跑乱,有些是可以通过命令修复的,有些则只能直接去增删改system catalog。本文结合一个具体错误,介绍如何操作system catalog解决元数据错误。...
分类:
其他好文 时间:
2015-05-13 10:24:46
阅读次数:
164
作为分布式数据库,Greenplum的元数据经常(是真的,经常遇到)会出现些错误,典型的一个是master node与seg node元数据不一致,本文结合一个具体错误,介绍下解决的办法。...
分类:
其他好文 时间:
2015-05-12 13:38:29
阅读次数:
175
$
gpinitsystem-c
/usr/local/greenplum-db/gpconfigs
/gpinitsystem_config20150429:15:30:59:023693gpcreateseg.sh:y153-hadoop-namenode2:gpadmin-[WARN]:-Failedtoinsertport=40000in/data/primary/gpseg0/postgresql.confony153-hadoop-namenode2.vclound.com20150429:15:..
分类:
其他好文 时间:
2015-04-30 20:19:10
阅读次数:
728
大家都知道,现在Apache Spark可以说是最火的开源大数据项目,就连EMC旗下专门做大数据Pivotal也开始抛弃其自研十几年GreenPlum技术,转而投入到Spark技术开发当中,并且从整个业界而言,Spark火的程度也只有IaaS界的OpenStack能相提并论。那么本文作为一篇技术文章,我们接着就直接切入它的核心机制吧。
什么是内存计算技术?
关于内存计算,就像云...
分类:
Web程序 时间:
2015-04-29 15:08:30
阅读次数:
209
greenplum-db-4.2.0.0-build-5-SuSE10-x86_64.rar下载地址:http://www.colafile.com/file/4953209Greenplum_详细安装指南.dochttp://www.colafile.com/file/4953553
分类:
数据库 时间:
2015-04-28 12:06:37
阅读次数:
213
Hadoop大数据零基础实战培训教程一,教程内容:1,Hadoop2.0YARN深入浅出系列2,Avro数据序列化系统3,Chukwa集群监控系统4,Flume日志收集系统5,Greenplum架构6,Hadoop的起源7,Hadoop商业应用案例8,HBase案例分析9,HBase编程实践10,M...
分类:
其他好文 时间:
2015-04-26 12:05:41
阅读次数:
209