Spark应用概念Spark应用(Application)是用户提交的应用程序。执行模式又Local、Standalone、YARN、Mesos。根据Spark Application的Driver Program是否在集群中运行,Spark应用的运行方式又可以分为Cluster模式和Client模式。
下面是Spark应用涉及的一些基本概念:
Application:Spark 的应用...
分类:
其他好文 时间:
2015-07-08 16:39:37
阅读次数:
178
按照官方文档的描述在server.xml的Engine元素中增加cluster子元素,配置如下:但是,在我的linux虚拟机上面启动tomcat时总是如下错误:信息:StartingServletEngine:ApacheTomcat/7.0.62七月07,201510:15:38上午org.apache.catalina.ha.tcp.SimpleTcpClusterstartInternal信息:C..
分类:
其他好文 时间:
2015-07-07 19:55:38
阅读次数:
198
SolutionIDsk91060ProductSecurityGateway,SecurityManagement,Cluster-3rdparty,VSXVersionR70,R70.1,
R70.20,R70.30,R70.40,R70.50,R71,R71.10,R71.20,R71.30,R71.40,
R71.45,R71.50,R75,R75.10,R75.20,R75.30,R75.40,R75.40VS,R75.45,
R75.46,R75.47,R76,R77,R77.10,R77.20,..
分类:
其他好文 时间:
2015-07-07 19:47:30
阅读次数:
200
Nginx负载平衡 + Tomcat + 会话存储Redis配置要点 使用Nginx作为Tomcat的负载平衡器,Tomcat的会话Session数据存储在Redis,能够实现0当机的7x24 运营效果。因为将会话存储在Redis中,因此Nginx就不必配置成stick粘粘某个Tomcat方式,这....
分类:
其他好文 时间:
2015-07-07 12:27:49
阅读次数:
141
B+树在NTFS文件系统中的应用flyfish 2015-7-6卷(volume)
NTFS的结构首先从卷开始。卷对应于磁盘上的一个逻辑分区,当你将一个磁盘或者磁盘的一部分格式化成NTFS,卷将被创建起来。一个磁盘可以有一个卷或好几个卷.NTFS独立的处理每一个卷。
卷对应的就是C盘,D盘,E盘等。簇(cluster)
在一个NTFS卷中,簇的大小,或者说簇因子(cluster factor)...
分类:
Web程序 时间:
2015-07-06 19:55:04
阅读次数:
222
三台服务器,(1)做路由,(2)(3)做realserver
IP为:192.168.196.121 (1)
192.168.196.122 (2)
192.168.196.123 (3)
要在(1) load banlance机器 上安装ipvsadm软件
可以在cluster目录里面找到,源码编译安装很麻烦,频频出错,这里不讲。
...
分类:
系统相关 时间:
2015-07-06 18:08:08
阅读次数:
180
2015.7.5.昨晚总算把tigaase7.0的开发环境搭起来了.稍微看了下代码结构.主要是auth,db,compnent,cluster,server,xmpp,这几块,准备先发点时间看看开发文档,了解一下基本架构.找个一些开发文档的翻译,结合原文一起看...tigase_server官方开发...
分类:
移动开发 时间:
2015-07-05 18:32:13
阅读次数:
557
简述hbase-0.90.0的一个重要改进是引入了replication机制,使它的数据完整性得到了进一步的保障。
hbase的replication机制很像mysql statement-based replication。它是通过WALEdit和HLog来实现的。当请求发送给master cluster时,HLog日志放入hdfs的同时进入replication队列,由slave cluste...
分类:
其他好文 时间:
2015-07-05 11:06:27
阅读次数:
651
解决方法: org.apache.hadoop hadoop-mapreduce-client-common 2.4.1
分类:
其他好文 时间:
2015-07-05 10:56:18
阅读次数:
1431
接下来一系列文章会对集群通信框架tribes进行源码级别的分析,欢迎讨论。把若干机器组合成一个集群,集群为了能协同工作,成员之间的通信是必不可少的,当然可以说这也是集群实现中重点需要解决的核心问题,一个强大的通信协同机制是集群的基础。简约地说,Tribes是一个具备让你通过网络向组成员发送和接收信息、动态检测发现其他节点的组通信能力的高扩展性的独立的消息框架。在组成员之间进行信息复制及成员维护是一...
分类:
其他好文 时间:
2015-07-04 16:47:00
阅读次数:
103