应用属性属性名缺省值意义spark.app.name(none)The name of your application. This will appear in the UI and in log data.spark.master(none)The cluster manager to conn...
分类:
其他好文 时间:
2015-09-08 18:13:39
阅读次数:
384
Spark的运行模式多种多样,在单机上既可以以本地模式运行,也可以以伪分布式模式运行。而当以分布式的方式运行在Cluster集群中时,底层的资源调度可以使用Mesos 或者是Hadoop Yarn ,也可以使用Spark自带的Standalone Deploy模式Spark处于活跃的开发过程中,代码...
分类:
其他好文 时间:
2015-09-08 18:11:27
阅读次数:
304
Analyze StatementThe ANALYZE statement can be used to gather statistics for a specific table, index or cluster. The statistics can be computed exactly...
分类:
数据库 时间:
2015-09-06 21:23:17
阅读次数:
277
按照此配置完全可以配置成功!!一、介绍========测试环境:Server1:ndbd 192.168.1.225Server2:ndbd 192.168.1.226Server3:mysqld --ndb-cluster 192.168.1.224 (ndbd_mgm ndbd_mgmd也在本机...
分类:
数据库 时间:
2015-09-06 18:01:18
阅读次数:
427
理想化的 Redis 集群 - 技术翻译 - 开源中国社区
分类:
其他好文 时间:
2015-09-05 23:38:45
阅读次数:
213
安装mon, osd后通过ceph -s查看状态,显示正常: [ceph@mdsnode ceph]$ ceph status
cluster 8587ec10-fe1a-41f5-9795-9d38ef20b493
health HEALTH_OK
monmap e1: 1 mons at {mdsnode=58.220.31.6...
分类:
其他好文 时间:
2015-09-01 15:21:30
阅读次数:
264
一、集群健康API查看集群状态信息:curl
http://localhost:9200/_cluster/health;echo查看集群节点信息:curlhttp://localhost:9200/_nodes/stats/host?pretty
分类:
其他好文 时间:
2015-09-01 00:12:37
阅读次数:
174
1. hdfs定义HDFS is the primary distributed storage used by Hadoop applications. A HDFS cluster primarily consists of a NameNode that manages the file sy...
分类:
其他好文 时间:
2015-08-31 18:53:53
阅读次数:
174
目录:
一、高可用集群的定义
二、高可用集群的衡量标准
三、高可用集群的层次结构
四、高可用集群的分类
五、高可用集群常用软件
六、共享存储
七、集群文件系统与集群LVM
八、高可用集群的工作原理
一、高可用集群的定义
高可用集群,英文原文为High Availability Cluster,简称HACluster,简单的说,集群(cluster)就是一组...
分类:
系统相关 时间:
2015-08-31 15:17:43
阅读次数:
303
一旦 shard coordinator(相当于分布式系统的 zookeeper) 启动,它就会启动一个定时器,每隔一定的时间尝试平衡一下集群中各个节点的负载,平衡的办法是把那些负载较重的 actor 移动到负载较轻的节点上。在这一点上,我以前的理解有误,我以为 shardRegion 是移动的最小...
分类:
其他好文 时间:
2015-08-30 22:54:03
阅读次数:
473