Hama学习笔记
1. Hama定义
Hama是基于HDFS上的BSP模型实现,其运行不需要MapReduce。例证如下: 在单点调试的Hama系统上,只运行NameNode、DataNode、BSPMasterRunner、GroomServerRunner和 ZooKeeperRunner进程,即可运行PageRank程序。
2. MapReduce与BSP区别
执行机制:MapR...
分类:
其他好文 时间:
2014-06-21 23:12:18
阅读次数:
268
本打算使用mapr的虚拟机在里面进行开发,使用eclipse进行调试,它的问题是,有时候服务不能完全起来,如jobtracker和tasktracker,cldb没有起来,重启服务有可能解决.但另外一个问题是我使用eclipse和0.20.2的插件,无法连接DFS location,无法调试hado...
分类:
其他好文 时间:
2014-06-16 23:40:12
阅读次数:
320
1、用正则表达式约束路由有工程11-3URLTestDemo,如在Global.asax中有如下路由定义:
public static void RegisterRoutes(RouteCollection routes) { routes.MapR...
分类:
其他好文 时间:
2014-05-28 21:07:42
阅读次数:
377
Sqoop提供的--fields-terminated-by选项可以支持指定自定义的分隔符,但是它只支持单字节的分隔符,对于我们特殊的需求:希望使用双字节的“|!”,默认的是不支持的。Sqoop在进行每一次的导出任务时,都会调用codegen,生成一个java文件,并编译打包成一个jar,供MapR...
分类:
其他好文 时间:
2014-05-24 09:51:25
阅读次数:
287
我下载了MAPR 官方提供的virtualbox 和
vmware版本的sandbox进行试用.开始试用了一会vmware版的,因为不太熟悉vmware的操作,而且vmplayer经常没有反应,后来改用了virtualbox版.因为sandbox是单机版的,所以必须把网络设置设为host
only,...
分类:
其他好文 时间:
2014-05-04 12:31:44
阅读次数:
319