>.ClouderaManager功能 1.1>.管理监控集群主机（主要监控硬件和软件的信息）； 1.2>.同一管理配置（主要是针对服务，比如hdfs，hbase等等）； 1.3>.管理维护Hadoop平台系统； 2>.ClouderaManager的一些常见名词 2.1>.主机-host 2.2> ...
分类：
其他好文 时间：
2020-12-01 11:54:36
阅读次数：
3
Delphi WinAPI SHGetPathFromIDList 描述：将项标识符列表转换为文件系统路径。 原型： BOOL SHGetPathFromIDListA( PCIDLIST_ABSOLUTE pidl, LPSTR pszPath ); 参数： PCIDLIST_ABSOLUTE / ...
列出的都是我工作中用上的，不足之处请在评论区补充，本文持续更新，分享才能进步加油！ jps -l ：查看所有的进程和 pid tail -100f ：动态查看后100行 cat：查看所有 kill -9 pid ：杀死进程 ll：纵表展示目录 history / history 100 ：展示历史命 ...
分类：
系统相关 时间：
2020-11-27 11:17:51
阅读次数：
14
MapReduce既是一个编程模型，也是一个计算组件，处理的过程分为两个阶段，Map阶段：负责把任务分解为多个小任务，Reduce负责把多个小任务的处理结果进行汇总。其中Map阶段主要输入是一对Key-Value，经过map计算后输出一对Key-Value值；然后将相同Key合并，形成Key-Value集合；再将这个Key-Value集合转入Reduce阶段，经过计算输出最终Key-Value结果集。
分类：
其他好文 时间：
2020-11-26 14:53:23
阅读次数：
6
参考帮助文档！ 1）全局配置 1、user Syntax: user user [group]; Default: user nobody nobody; Context: main 指定worker进程的运行身份，如组不指定，默认和用户名同名； 2、pid /PATH/TO/PID_FILE 指定 ...
分类：
其他好文 时间：
2020-11-26 14:47:35
阅读次数：
8
当idea提示8080端口被占用时，可以通过在cmd中查看占用8080端口号的是谁，终止它就行 解决方法: 开始 >运行 >cmd（window+R组合键），调出命令窗口 输入命令 netstat -aon|findstr 8080，可以查看占用8080端口的是pid为多少的进程 输入命令： tas ...
分类：
其他好文 时间：
2020-11-26 14:39:41
阅读次数：
4
package com.atguigu.etl; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.NullWritable; impo ...
分类：
其他好文 时间：
2020-11-25 13:04:03
阅读次数：
26
1.大数据架构图谱 文件系统 HDFS Hadoop Distributed File System，简称HDFS，是一个分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。 GlusterFS 是一个集群的文件系统 ...
分类：
其他好文 时间：
2020-11-25 12:06:50
阅读次数：
8
一：heap dump 1、heapdump:记录内存信息的，heap dump文件是一个二进制文件，它保存了某一时刻JVM堆中对象使用情况， heapdump文件是指定时刻的Java堆栈的快照，是一种镜像文件。 2、产生heapdump(内存溢出)错误原因一般出于以下原因： 1)JVM内存过小。 ...
分类：
其他好文 时间：
2020-11-24 12:19:42
阅读次数：
8
一、 初始化工作： 1. 准备三台机器 hostanme IP 用途 master 192.168.0.10 namenode node1 192.168.0.11 datenode node2 192.168.0.12 datenode 在三台机器上做下面的动作 2. 编辑/etc/hosts 1 ...
分类：
其他好文 时间：
2020-11-23 12:38:36
阅读次数：
12
