码迷,mamicode.com
首页 >  
搜索关键字:yarn rm crash    ( 7575个结果
Linux文件与目录管理
. 代表当前目录.. 代表上一层目录- 代表前一个工作目录~ 代表“目前用户身份”所在的主文件夹cd切换目录pwd 显示当前所在目录mkdir 新建一个新的目录rmdir 删除一个空的目录,如果有内容则不可以,如果要删除,则可以使用rm-rtest执行文件路径的变量:环境变量$PATH通过echo$...
分类:系统相关   时间:2014-07-16 22:51:35    阅读次数:250
spark-submit 提交任务到yarn执行
spark-submit \--name SparkSubmit_Demo \--class com.luogankun.spark.WordCount \--master yarn-client \--executor-memory 1G \--total-executor-cores 1 \/h...
分类:其他好文   时间:2014-07-16 21:09:32    阅读次数:260
Spark JDBC入门测试
spark jdbc分支源码下载地址 https://github.com/apache/spark/tree/branch-1.0-jdbc编译spark jdbc ./make-distribution.sh --hadoop 2.3.0-cdh5.0.0 --with-yarn --wit.....
分类:数据库   时间:2014-07-16 21:04:35    阅读次数:306
html在网页中嵌套视频
1.avi格式代码片断如下: 2.mpg格式代码片断如下:3.smi格式代码片断如下:4.rm格式代码片断如下:5.wmv格式代码片断如下:6.wma格式放在 里面。下面是部分解释:7.Windows Media Player 系列(不同面板样式)综合型:简易型:标签型:引用内容媒体播放器的外观界....
分类:Web程序   时间:2014-07-16 20:41:35    阅读次数:269
Vesions ignore & ld: library not found for -l...
1.递归删除指定目录下的 .git、.svn 文件find . -name .git | xargs rm -frfind . -name .svn | xargs rm -rf第一条倒还不常用,因为用 git 做版本管理的时候,只在根目录下生成一个 .git 目录,删掉这一个就行了~因此,删除 ....
分类:其他好文   时间:2014-07-16 19:55:02    阅读次数:182
Mapreduce执行过程分析(基于Hadoop2.4)——(三)
4.4 Reduce类 4.4.1 Reduce介绍 整完了Map,接下来就是Reduce了。YarnChild.main()—>ReduceTask.run()。ReduceTask.run方法开始和MapTask类似,包括initialize()初始化,根据情况看是否调用runJobCleanupTask(),runTaskCleanupTask()等。之后进入正式的工作,主要有这...
分类:其他好文   时间:2014-07-12 22:50:33    阅读次数:185
史上最全的hadoop
课程主要涉及Hadoop Sqoop、Flume、Avro重要子项目的技术实战 课程针对人群 1、本课程适合于有一定java基础知识,对数据库和sql语句有一定了解,熟练使用linux系统的技术人员,特别适合于想换工作或寻求高薪职业的人士 2、最好有Greenplum Hadoop、Hadoop2.0、YARN、Sqoop、FlumeAvro等大数据基础,学习过北风课程《Gree...
分类:其他好文   时间:2014-07-12 20:58:37    阅读次数:220
Mapreduce执行过程分析(基于Hadoop2.4)——(二)
4.3 Map类    创建Map类和map函数,map函数是org.apache.hadoop.mapreduce.Mapper类中的定义的,当处理每一个键值对的时候,都要调用一次map方法,用户需要覆写此方法。此外还有setup方法和cleanup方法。map方法是当map任务开始运行的时候调用一次,cleanup方法是整个map任务结束的时候运行一次。 4.3.1 Map介绍 ...
分类:其他好文   时间:2014-07-12 17:23:40    阅读次数:262
解决克隆 centos虚拟机后修改克隆后的机器的ip、mac、uuid失败的问题
解决办法:So here’s how we fix it:Remove the kernel’s networking interface rules file so that it can be regenerated# rm -f /etc/udev/rules.d/70-persistent-...
分类:其他好文   时间:2014-07-12 09:11:25    阅读次数:473
Xcode6在10.9.4上面crash解决
xcode6在10.9.4crash解决过程记录...
分类:其他好文   时间:2014-07-10 19:34:40    阅读次数:179
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!