三、系统配置之关闭防火墙
systemctl stop firewalld.service #停止firewall
systemctl disable firewalld.service #禁止firewall开机启动
systemctl命令的基本操作格式是：
systemc...
分类：
其他好文 时间：
2014-08-06 14:33:31
阅读次数：
441
1 概述 为了增大并发性，Yarn采用事件驱动的并发模型，将各种处理逻辑抽象成事件和调度器，将事件的处理过程用状态机表示。什么是状态机？ 如果一个对象，其构成为若干个状态，以及触发这些状态发生相互转移的事件，那么此对象称之为状态机。 处理请求作为某种事件发送到系统中，由一个中央调度器传递给对应的.....
分类：
其他好文 时间：
2014-08-06 01:20:00
阅读次数：
1012
1 概述
为了增大并发性，Yarn采用事件驱动的并发模型，将各种处理逻辑抽象成事件和调度器，将事件的处理过程用状态机表示。什么是状态机？
如果一个对象，其构成为若干个状态，以及触发这些状态发生相互转移的事件，那么此对象称之为状态机。
处理请求作为某种事件发送到系统中，由一个中央调度器传递给对应的事件调度器，进而对事件进行处理，处理完成之后再次发送给中央调度...
分类：
其他好文 时间：
2014-08-05 22:34:40
阅读次数：
232
=======================执行流程 1. 从页面开始，提交表单或者点击链接会触发一个action 2. action交给struts2处理，读取src目录struts.xml文件，在配置中找到对应的action 3. 根据class="XXXAction"交给Spring(为什么...
分类：
Web程序 时间：
2014-08-05 15:40:19
阅读次数：
211
1 概述
Spark的on Yarn模式，其资源分配是交给Yarn的ResourceManager来进行管理的，但是目前的Spark版本，Application日志的查看，只能通过Yarn的yarn logs命令实现。
在部署和运行Spark Application的过程中，如果不注意一些小的细节，也许会导致一些问题的出现。
2 防火墙
部署好Spark...
分类：
其他好文 时间：
2014-08-04 14:23:27
阅读次数：
297
yarn.resourcemanager.hostname hadoop100 yarn.nodemanager.aux-services mapreduce_shuffle yarn.resourcemanager.hostname hadoop100 yarn.nodemanage...
分类：
其他好文 时间：
2014-08-04 13:58:07
阅读次数：
202
一、多线程 进程一般作为资源的组织单位，是计算机程序的运行实例，表示正在执行的指令，有自己独立的地址空间，包含程序内容和数据，进程间资源和状态相互隔离。 线程是程序的执行流程，CPU调度执行的基本单位，...
分类：
编程语言 时间：
2014-08-04 11:18:27
阅读次数：
249
结构化异常处理程序？
SEH:structured Exception Handling,结构化异常处理。
结构化异常处理，是Windows操作系统上，Microsoft对C/C++程序语言做的语法扩展，用于处理异常事件的程序控制结构。
异常事件是打断程序正常执行流程的不在期望之中的硬件、软件事件。硬件异常是CPU抛出的如“除0”、数值溢出等；软件异常是操作系统与程序通过RaiseExc...
分类：
其他好文 时间：
2014-08-04 02:03:56
阅读次数：
311
本篇主要解读了nutch的第四个环节parse过程的执行流程和处理方法。
分类：
其他好文 时间：
2014-08-03 12:36:15
阅读次数：
221
本篇主要重点讲解了阅读nutch源码的fetch部分的感受以及通过调试追踪整个fetch的执行流程，其中包括通过生产者-消费者的模型解决爬虫问题，nutch如何爬取页面以及对于不同的返回状态做相应的处理机制，其中还涉及到一些多线程的知识。
分类：
其他好文 时间：
2014-08-02 17:55:13
阅读次数：
290
