码迷,mamicode.com
首页 >  
搜索关键字:hadoop docommission shell 自动化    ( 56762个结果
android手机抓wireshark包的步骤-tcpdump(需root权限)
1. 先给手机刷root权限,执行命令:adb root adb remountok后:把tcpdump放到c盘根目录下:C:\2. 执行命令:adb push c:/tcpdump /data/local/tcpdump(这个命令是把tcpdump拷到手机中去 )3. adb shell chmo...
分类:移动开发   时间:2014-05-12 11:43:01    阅读次数:426
读写Microsoft Excel 文件控件Essential XlsIO 详细介绍及免费下载
Essential XlsIO 是一款.NET库,可用于读写Microsoft Excel 文件,具备丰富的功能,完全像Microsoft Office办公自动化,可用于没有安装Excel的操作系统,可以导出为图片、HTML、PDF等,开发人员可以使用该控件创建标准的兼容Excel 2007和201...
分类:其他好文   时间:2014-05-12 10:18:52    阅读次数:412
python 实现Hadoop的partitioner和二次排序
Hadoop Streaming 是一个工具, 代替编写Java的实现类,而利用可执行程序来完成map-reduce过程 工作流程 :  InputFile --> mappers --> [Partitioner] --> reducers --> outputFiles 理解 :  1 输入文件,可以是指定远程文件系统内的文件夹下的 * 2 通过集群自己分解到各个PC...
分类:编程语言   时间:2014-05-11 14:46:35    阅读次数:519
自己写的一个自动化测试任务执行工具(模板)
@echo off REM 设置自动执行的最大次数 SET nMaxJobTimes=100 REM 启用变量延迟 setlocal enabledelayedexpansion FOR /L %%i IN (0,1,%nMaxJobTimes%) DO ( cls echo. echo. echo ******************************...
分类:其他好文   时间:2014-05-11 13:42:55    阅读次数:326
Hadoop-2.2.0中文文档—— MapReduce 下一代 -- 公平调度器
目的 此文档描述了 FairScheduler, Hadoop 的一个可插入式的调度器,允许 YARN 应用在一个大集群中公平地共享资源。 简介 公平调度是一种分配资源给应用的方法,以致到最后,平均上所有应用获得相等的资源。  Hadoop NextGen 能够调度多种类型的资源。默认的, Fair Scheduler 仅以内存为基础作公平调度决策。可以用Ghodsi 等开发的 ...
分类:其他好文   时间:2014-05-11 13:05:57    阅读次数:393
大数据Lambda架构
1 Lambda架构介绍 Lambda架构划分为三层,分别是批处理层,服务层,和加速层。最终实现的效果,可以使用下面的表达式来说明。 query = function(alldata) 1.1 批处理层 批处理层主用由Hadoop来实现,负责数据的存储和产生任意的视图数据。计算视图数据是一个联系操作,因此,当新数据到达时,使用MapReduce迭代地将数据聚集到视图中。 从整个数据集中计算...
分类:其他好文   时间:2014-05-11 07:29:44    阅读次数:419
ksh和bash区别
一、实践证明,在AIX上用的是ksh,linux上是bashsh或bsh,全名是bourneshell。它最早出现,是标准shell。后两者都兼容它。ksh和bash后续加入了历史记录,交互特性,数组,等新功能。ksh在unix上使用较多。比如hpux,AIXbash在linux上使用较多。也可以用...
分类:其他好文   时间:2014-05-11 01:30:57    阅读次数:432
Hadoop 学习资料集锦
Hadoop 资料虾皮系列教程。Sqoop 资料官方安装文档。浪迹天涯博客。……
分类:其他好文   时间:2014-05-11 01:07:23    阅读次数:298
计算机中文核心期刊
1.软件学报;2.计算机学报;3.计算机研究与发展;4.系统仿真学报;5.计算机辅助设计与图形学学报;6.自动化学报;7.控制与决策;8.中国图象图形学报;9.计算机集成制造系统;10.中文信息学报;11.控制理论与应用;12.计算机应用;13.计算机应用研究;14.小型微型计算机系统;15....
分类:其他好文   时间:2014-05-11 00:27:57    阅读次数:274
Samza在YARN上的启动过程 =》 之二 submitApplication
首先,来看怎么构造一个org.apache.hadoop.yarn.client.api.YarnClientclass ClientHelper(conf: Configuration) extends Logging { val yarnClient = YarnClient.createYa....
分类:移动开发   时间:2014-05-10 22:39:32    阅读次数:656
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!