转自：https://blog.csdn.net/zhanglong_4444/article/details/99471770 name description value hadoop.registry.rm.enabled 是否在YARN资源管理器中启用了注册表？ 如果属实，那么YARN RM ...
1.初始化版本库 git init 2.添加文件到版本库 git add git commit 3.查看仓库状态 git status 4.撤销初始化命令 rm -rf .git ...
分类：
其他好文 时间：
2020-07-06 10:45:26
阅读次数：
63
命令[root@spider1 bin]# rpm -qa|grep python|xargs rpm -ev --allmatches --nodeps ##强制删除已安装程序及其关联 [root@spider1 bin]# whereis python |xargs rm -frv ##删除所有 ...
分类：
其他好文 时间：
2020-07-05 21:18:06
阅读次数：
45
启动集群及监控 进入目录 cd /usr/local/hadoop-2.6.5/sbin/ 启动整个集群组件 ./start-dfs.sh 启动yarn集群 ./start-yarn.sh 启动日志服务 ./mr-jobhistory-daemon.sh start historyserver 查看 ...
分类：
其他好文 时间：
2020-07-04 16:57:27
阅读次数：
64
（1）MR程序提交到客户端所在的节点。（2）YarnRunner向ResourceManager申请一个Application。（3）RM将该应用程序的资源路径返回给YarnRunner。（4）该程序将运行所需资源提交到HDFS上。（5）程序资源提交完毕后，申请运行mrAppMaster。（6）RM ...
分类：
其他好文 时间：
2020-07-04 15:14:37
阅读次数：
54
GitHub对文件的大小有限制，问题在于，当移除了相关的文件之后，问题依然存在。 解决方法： 除了移除相关的文件，还要修改git的历史记录，移除相应的commit结点。 最简单的方法是使用以下命令： git filter-branch -f --index-filter 'git rm --cach ...
分类：
其他好文 时间：
2020-07-04 15:05:52
阅读次数：
56
工作流程1 Map Task MR工作流程2 Reduce Task 1）提交切片信息，jar包，和xml配置文件到yarn。2）Yarn ResourceManager启动一个MR AppMaster。3）AppMaster根据切片信息启动相应数量的Map Task。4）Map Task取读取按照 ...
分类：
其他好文 时间：
2020-07-03 23:29:37
阅读次数：
60
取消跟踪，语法同linux rm命令 git rm --cached 路径 //取消跟踪，但不删除文件 git rm --f 路径 //取消跟踪，并删除文件 ...
分类：
其他好文 时间：
2020-07-03 21:30:12
阅读次数：
58
起因 安装nodejs / npm 软连接的添加和删除 nodejs npm 软链接 建立软连接： ln -s /usr/nodejs/bin/npm /usr/local/bin/ ln -s /usr/nodejs/bin/node /usr/local/bin/ 删除软连接： rm -rf / ...
分类：
系统相关 时间：
2020-07-03 19:23:18
阅读次数：
98
定时备份docker部署的mysql数据 1.新建脚本,添加脚本内容 vi mysql_backup_test_backup.sh #!/bin/bash # 设置mysql的登录用户名和密码(根据实际情况填写) mysql_user="root" mysql_password="root" mys ...
分类：
数据库 时间：
2020-07-03 19:13:55
阅读次数：
89
