1 概述
Spark的on Yarn模式,其资源分配是交给Yarn的ResourceManager来进行管理的,但是目前的Spark版本,Application日志的查看,只能通过Yarn的yarn logs命令实现。
在部署和运行Spark Application的过程中,如果不注意一些小的细节,也许会导致一些问题的出现。
2 防火墙
部署好Spark...
分类:
其他好文 时间:
2014-08-04 14:23:27
阅读次数:
297
各种配置在命令行状态下,多用crm进行 Global Cluster Options 这个类型是全局配置,主要包含下面两个: no-quorum-policy quorum的意思是最低法定人数,pacemaker能够继续工作所需要的最少的active的node的个数,这个数是(num of node...
分类:
其他好文 时间:
2014-08-03 22:48:46
阅读次数:
602
ocr和votedisk是什么?
作为集群节点,oracle cluster会在...
分类:
数据库 时间:
2014-08-03 15:22:35
阅读次数:
378
周氏一族,整理技术文档,给下一代留点教程......网络架构192.168.0.202管理节点(MGM)192.168.0.203存储节点(NDB)192.168.0.204查询节点(API)准备材料(可以到官网下载,解压拿出来这两个包)MySQL-Cluster-client-gpl-7.3.5-1.el6.x86_64.rpmMySQL-Cluster-server-gpl-7.3.5-1.e..
分类:
数据库 时间:
2014-08-03 08:02:05
阅读次数:
472
一、NDBCluster(分布式存储引擎)存储引擎简单简介NDB存储引擎也叫NDBCluster存储引擎,主要用于MySQLCluster分布式集群环境,Cluster是MySQL从5.0版本才开始提供的新功能。这部分我们可能并不仅仅只是介绍NDB存储引擎,因为离开了MySQLCLuster整个环境,NDB存储引擎也将失去..
分类:
数据库 时间:
2014-08-03 07:55:25
阅读次数:
356
How to add VIPs to Percona XtraDB Cluster or MHA with Pacemaker http://www.mysqlperformanceblog.com/2013/11/20/add-vips-percona-xtradb-cluster-mha-pac...
分类:
数据库 时间:
2014-08-02 20:49:14
阅读次数:
430
http://www.geekpeek.net/linux-cluster-corosync-pacemaker/ Linux Cluster Part 1 – Install Corosync and Pacemaker on CentOS 6 I have been using Linux Cl...
分类:
系统相关 时间:
2014-08-02 20:47:54
阅读次数:
839
作为个人学习笔记分享,有任何问题欢迎交流!
Fuel HA组成
OpenStack生产环境推荐使用HA,以避免单点故障,下图为Fuel HA设计图,HA要求有3个控制节点。
1)Pacemaker Cluster :Pacemaker Cluster 由Pacemaker和Corosync组成,Pacemaker是一个集群资源管理器。它利用你喜欢的集群基础构件(O...
分类:
其他好文 时间:
2014-08-02 12:49:53
阅读次数:
373
1:创建MariaDB.repo#vim/etc/yum.repos.d/MariaDB.repo#MariaDB10.0CentOSrepositorylist-created2013-08-2313:08UTC#http://mariadb.org/mariadb/repositories/[mariadb]name=MariaDBbaseurl=http://yum.mariadb.org/10.0/centos6-amd64gpgkey=https://yum.mariadb.org/RPM-GP..
分类:
数据库 时间:
2014-08-01 20:10:23
阅读次数:
562
设定hbase的数据目录,修改conf/hbase-site.xml hbase.cluster.distributed true The mode the clusterwill be in. Possible values are ...
分类:
其他好文 时间:
2014-08-01 18:30:52
阅读次数:
202