分类：杂谈| 发布：佚名| 查看：70 |
发表时间：2014-2-17引言HTTP是一个属于应用层的面向对象的协议，由于其简捷、快速的方式，适用于分布式超媒体信息系统。它于1990年提出，经过几年的使用与发展，得到不断地完善和扩展。目前在WWW中使用的是HTTP/1.0的第六版，HTTP/1.1的...
分类：
其他好文 时间：
2014-05-05 12:09:56
阅读次数：
258
1.核心 HDFS 分布式文件系统 主从结构，一个namenoe和多个datanode，
分别对应独立的物理机器
1)NameNode是主服务器，管理文件系统的命名空间和客户端对文件的访问操作。NameNode执行文件系统的命名空间操作，比如打开关闭重命名文件或者目录等，它也负责...
分类：
其他好文 时间：
2014-05-05 10:35:14
阅读次数：
432
转自:http://blog.csdn.net/bluesky8640/article/details/6945776之前装python、jdk、hadoop都是用的root账户，这是一个绝对的失策，linux对用户访问权限很严格，新创的hod账户根本无法启动hadoop，而root在hod模式下使...
分类：
系统相关 时间：
2014-05-05 10:09:20
阅读次数：
753
之前Velocity已被 集成到App Fabric(包含有WCF监控==)中.
网络Velocity使用大多是针对老版本: 老版本的下载地址:
http://www.microsoft.com/en-us/download/details.aspx?id=2517 这里针对App Fabric做一...
分类：
Web程序 时间：
2014-05-04 20:12:53
阅读次数：
613
Data
Abstract是最好的多层次框架，它提供端到端的解决方案，同时也可以很轻松地建立起可扩展的数据库方案以满足如今的分布式系统要求。
分类：
其他好文 时间：
2014-05-04 19:54:58
阅读次数：
359
RDIFramework.NET，基于.NET的快速信息化系统开发、整合框架，给用户和开发者最佳的.Net框架部署方案。该框架以SOA范式作为指导思想，作为异质系统整合与互操作性、分布式应用提供了可行的解决方案。RDIFramework.NET框架的SOA（WCF服务端）可以通过以下几种方式进行寄存（发布）：以Windows服务方式寄存，以WinForm形式寄存和以IIS形式寄存。...
RDIFramework.NET框架SOA解决方案（集Windows服务、WinForm形式与IIS形式发布）-分布式应用RDIFramework.NET，基于.NET的快速信息化系统开发、整合框架，给用户和开发者最佳的.Net框架部署方案。该框架以SOA范式作为指导思想，作为异质系统整合与互操作性、分布式应用提供了可..
软件环境： 虚拟机：VMware Workstation 10
操作系统：ubuntu-12.04-desktop-amd64 JAVA版本：jdk-7u55-linux-x64 Hadoop版本：hadoop-1.2.1
Hadoop下载地址：http://mirrors.cnnic.cn/apa...
分类：
其他好文 时间：
2014-05-04 10:43:51
阅读次数：
370
MapReduce
job中,可以使用FileInputFormat和FileOutputFormat来对输入路径和输出路径来进行设置。在输出目录中，框架自己会自动对输出文件进行命名和组织，如:part-(m|r)-00000之类。但有时为了后续流程的方便，我们常需要对输出结果进行一定的分类和组织。...
分类：
其他好文 时间：
2014-05-04 10:22:15
阅读次数：
341
Spark中的Scheduler
scheduler分成两个类型，一个是TaskScheduler与其实现，一个是DAGScheduler。
TaskScheduler:主要负责各stage中传入的task的执行与调度。
DAGScheduler:主要负责对JOB中的各种依赖进行解析，根据RDD的依赖生成stage并通知TaskScheduler执行。
实例生成
TaskSchedule...
分类：
其他好文 时间：
2014-05-04 09:08:02
阅读次数：
379
