码迷,mamicode.com
首页 >  
搜索关键字:distributed job    ( 5958个结果
zoj 3557 How Many Sets II
How Many Sets IITime Limit:2 Seconds Memory Limit:65536 KBGiven a setS= {1, 2, ...,n}, numbermandp, your job is to count how many setTsatisfies the fo...
分类:其他好文   时间:2014-05-12 13:05:52    阅读次数:238
自定义ISPF面板
1)登录的时候可以看到登录执行的PROCEDURE,此处为DBSPROC2、登录后,进入SDSF,再进入LOG,输入命令TOP,再输入命令F JOB,按F11把屏幕向右翻页,看到哪下界面找到//IEFPDSI DD DSN=xxxxxx.DISP=SHR此处可以找到ADCD.Z19.PROCLIB和...
分类:其他好文   时间:2014-05-12 06:44:20    阅读次数:356
分布式文件系统 ~MogileFS~
一、分布式文件系统分布式文件系统(Distributed File System)是指文件系统管理的物理存储资源不一定直接连接在本地节点上,而是通过计算机网络与节点相连,也就是集群文件系统,可以支持大数量的节点以及PB级的数量存储。相对地,在一个分享的磁盘文件系统中,所有节点对数据存储区块都有相同的...
分类:其他好文   时间:2014-05-11 15:16:30    阅读次数:470
Samza在YARN上的启动过程 =》 之一
运行脚本,提交job往YARN提交Samza job要使用run-job.sh这个脚本。samza-example/target/bin/run-job.sh --config-factory=samza.config.factories.PropertiesConfigFactory --conf...
分类:其他好文   时间:2014-05-10 17:52:13    阅读次数:609
在Linux下部署kettle的Job
关于如何用kettle创建job以及如何部署kettle到linux上,我就不细说了,大家应该都会,下面重点说一下,如何让job执行起来先将创建好的脚本上传到kettle指定目录下面,创建调用job执行的脚本文件,exportJAVA_HOME=/usr/java/jre1.6.0_23 exportPATH=$JAVA_HOME/bin:$PATH expor..
分类:系统相关   时间:2014-05-09 21:25:51    阅读次数:521
分布式特性(distributed nature)
在这章节的开始,我们曾经提到过ES能扩展到成百上千的服务器,并且能处理PT级别的数据。然而在这个教程中介绍如何使用ES的时候并没有提及到服务器。ES天生为分布式设计,他隐藏了随分布式而来的很多复杂细节。ES的分布式在很大程度上是透明的。教程中不需要你知道有关分布式系统,sharding,cluste...
分类:其他好文   时间:2014-05-09 20:09:05    阅读次数:230
Hadoop之HDFS
摘要:HDFS是Hadoop的核心模块之一,围绕HDFS是什么、HDFS的设计思想和HDFS的体系结构三方面来介绍。关键词:Hadoop HDFS 分布式存储系统HDFS是Hadoop的核心模块之一,HDFS是什么?它是Hadoop分布式文件系统(Hadoop Distributed File S....
分类:其他好文   时间:2014-05-08 23:38:42    阅读次数:412
MySQL5.6 基于db的并行复制
slave的几个类结构: Master_info:用于IO线程的参数,包括连接master实例的信息。 Relay_log_info:用于sql线程,表示relay log相关的信息。 Slave_worker:继承Relay_log_info,包括一个job队列,用于并行的worker线程。...
分类:数据库   时间:2014-05-08 19:28:57    阅读次数:369
note: Spanner: Google’s Globally-Distributed Database
1. Abstract & introductionref:http://static.googleusercontent.com/media/research.google.com/zh-CN//archive/spanner-osdi2012.pdfSpanner是google为了弥补bigta...
分类:数据库   时间:2014-05-08 06:46:57    阅读次数:640
Pig源码分析: 简析执行计划的生成
本文通过跟代码的方式,分析从输入一批Pig-latin到输出物理执行计划(与launcher引擎有关,一般是MR执行计划,也可以是Spark RDD的执行算子)的整体流程。 不会具体涉及AST如何解析、如何使用了Anltr、逻辑执行计划如何映射、逻辑执行计划如何优化、MR执行计划如何切分为MR Job,而是从输入一批Pig DSL到待执行的真正执行计划的关键变化步骤(方法和类)。...
分类:其他好文   时间:2014-05-08 04:00:42    阅读次数:407
5958条   上一页 1 ... 592 593 594 595 596 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!