主机启动: jps查看启动项。 查看分节点,slave1 : 查看分节点,slave2: 过了一分钟在查看分节点信息: 发现分节点 NodeManager已经关闭。 查看日志发现以下问题: 日志报错信息: ...
分类:
其他好文 时间:
2016-05-16 21:26:45
阅读次数:
173
ConcurrentModificationException 集合并发修改异常 解决 import java.util.ArrayList; import java.util.List; import java.util.ListIterator; /** * 问题? * 有一个集合,如下,请问, ...
分类:
其他好文 时间:
2016-05-16 17:38:50
阅读次数:
103
在看ArrayList源码时,看到了一个字段modCount。在add、remove、clear等方法中都有modCount++的操作。不明白什么意思。点进去看了看该字段的解释,总算明白了。modCount是在AbstractList抽象类中定义的。该字段的解释如下所示。 /**
* The number of times this list has been structur...
分类:
其他好文 时间:
2016-05-13 14:44:12
阅读次数:
170
运行流程当你在MapReduce程序中调用了Job实例的Submit()或者waitForCompletion()方法,该程序将会被提交到Yarn中运行
其中的过程大部分被Hadoop隐藏起来了,对开发者来说是透明的
程序运行的过程涉及到个概念:
1.Client:提交程序的客户端
2.ResourceManager:集群中的资源分配管理
3.NodeManager:启动和监管各...
分类:
其他好文 时间:
2016-05-13 03:09:26
阅读次数:
175
提示LOGS信息
org.apache.hadoop.yarn.exceptions.YarnRuntimeException: java.net.NoRouteToHostException: No Route to Host from dataNode1/192.168.2.247 to nameNode:8031 failed on socket timeout exception: j...
分类:
编程语言 时间:
2016-05-12 12:14:53
阅读次数:
1208
发生ConcurrentModificationException场景分析
循环list并删除list中的元素,code:
public class ConcurrentModificationExceptionTest {
public static void main(String[] args) {
// 初始化包含0-9共10个Integer对象的ArrayList;...
分类:
其他好文 时间:
2016-05-07 10:51:11
阅读次数:
147
YARN:下一代 Hadoop 计算平台 我们现在稍微改变一下用辞。以下名称的改动有助于更好地了解 YARN 的设计: ResourceManager 代替集群管理器 ApplicationMaster 代替一个专用且短暂的 JobTracker NodeManager 代替 TaskTracker ...
分类:
其他好文 时间:
2016-05-03 20:25:59
阅读次数:
144
/** * 案例: 有如下一个list集合,需求,遍历集合,当集合中等于"five"元素,那么就插入元素"four". * * 解决问题的过程中发现: * 在迭代过程中,如果使用了集合的方法进行增删改查操作,那么迭代器会抛出 异常 ConcurrentModificationException. 原 ...
分类:
其他好文 时间:
2016-05-02 21:07:41
阅读次数:
1353
1.启动和连接OAG OAG连接的时候除了不选择analysis,其他都选上,然后启动Gateway实例以及Nodemanager. 命令如下: /$OAG_HOME/apigateway/posix/bin/startinstance -n "Gateway1" -g "Group1" ./nod ...
分类:
数据库 时间:
2016-04-28 09:19:51
阅读次数:
286
一、同步容器 主要代表有Vector和Hashtable,以及Collections.synchronizedXxx等。 锁的粒度为当前对象整体。 迭代器是及时失败的,即在迭代的过程中发现被修改,就会抛出ConcurrentModificationException。 二、并发容器 主要代表有Con ...
分类:
其他好文 时间:
2016-04-17 16:09:55
阅读次数:
172