码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce 脚本    ( 66003个结果
python文件操作
打开 在Python中,使用open函数,可以打开一个已经存在的文件,或者创建一个文件,语法如下: 变量(文件对象) = open(name,mode) name:是要打开的目标文件名的字符串(可以包含文件具体路径) mode:设置打开文件的模式(访问模式):只读、写入、追加等 打开文件模式 **注 ...
分类:编程语言   时间:2021-03-08 13:11:36    阅读次数:0
关于js的一点用法
JavaScript简介 js是一种弱类型语言,也是一种动态类型语言,js是一种基于对象和事件驱动的脚本语言。弱类型是指它对数据类型的要求不高,动态类型语言是指它在运行期间可以任意赋值。 基本语法 变量 语法:使用var声明变量 ,eg:var i = 100; var s = "s"; 注意:变量 ...
分类:Web程序   时间:2021-03-06 14:47:36    阅读次数:0
zookeeper集群搭建安装
hadoop大数据集群搭建过程中,需要使用到zookeeper进行主从管理和控制,那我们就安装一套集群环境 1、下载zookeeper 登录zookeeper.apache.org官网,找到Getting Started下边的Download。 进去之后我们选择一个版本,比如选择3.6.2,进去后选 ...
分类:其他好文   时间:2021-03-06 14:45:39    阅读次数:0
hadoop 配置历史服务器
配置文件 mapred-site.xml 加入以下代码 <!-- 历史服务器端地址 --> <property> <name>mapreduce.jobhistory.address</name> <value>hadoop102:10020</value> </property> <!-- 历史服 ...
分类:其他好文   时间:2021-03-06 14:37:58    阅读次数:0
hadoop 集群崩溃操作办法
杀死进程 $HADOOP_HOME/sbin/stop-yarn.sh $HADOOP_HOME/sbin/stop-dfs.sh 删除所有节点 hadoop 根目录下的 data 和 logs rm -rf data/ logs/ 格式化 在 hadoop 根目录下执行 hdfs namenode ...
分类:其他好文   时间:2021-03-06 14:35:10    阅读次数:0
mac搭建hadoop环境
参考:https://blog.csdn.net/vbirdbest/article/details/88189753 安装步骤 1. 修改主机名 sudo scutil --set HostName localhost 2. ssh免密登录 具体配置方法: (1)ssh-keygen -t rsa ...
分类:系统相关   时间:2021-03-06 14:17:50    阅读次数:0
centos7 集群整体操作脚本
1、在/root/bin目录创建脚本xcall.sh 2、脚本本周编写内容 [root@wd ~]# vi xcall.sh !/bin/bash for i in wd.idc.com wd2 wd1 do echo $i ssh $i "$*" done 3、修改脚本执行权限 [root@wd ...
分类:其他好文   时间:2021-03-05 12:59:52    阅读次数:0
if __name__ == '__main__'的原理和作用
###作用 一个python文件通常有两种使用方法,第一是作为脚本直接执行,第二是 import 到其他的 python 脚本中被调用(模块重用)执行。因此 if name == 'main': 的作用就是控制这两种情况执行代码的过程,在 if name == 'main': 下的代码只有在第一种情 ...
分类:其他好文   时间:2021-03-04 13:34:11    阅读次数:0
oracle基础~rman备份脚本
一 全备 #设置环境变量 export ORACLE_BASE=/oracle export ORACLE_HOME=$ORACLE_BASE/product/10.2.0/db_1 export ORACLE_SID=hncdfpos001 export NLS_LANG=AMERICAN_AME ...
分类:数据库   时间:2021-03-04 13:30:40    阅读次数:0
常用Python脚本
1.请按照这样的日期格式(xxxx-xx-xx)每日生成一个文件,例如今天生成的文件为2019-04-26.log, 并且把磁盘的使用情况写到到这个文件中。 import time, os new_time = time.strftime("%Y-%m-%d") disk_status = os.p ...
分类:编程语言   时间:2021-03-04 13:27:25    阅读次数:0
66003条   上一页 1 ... 38 39 40 41 42 ... 6601 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!