用途cd命令的主要作用是变换目录全称cd的全称是Change Directory案例以下是一些基础的cd命令操作(蓝色字体代表解释说明)[root@bigdata ~]# 分别代表用户名（root），主机名（bigdata），当前路径（~,当前用户的home目录），权限标志位（#代表root，$代表... ...
分类：
系统相关 时间：
2018-08-07 20:32:54
阅读次数：
136
1、新建文件夹 mkdir bigdata；在当前文件夹下新建bigdata文件夹； 2、显示当前文件夹全目录 pwd； 3、移动文件：mv /usr/etc/spark-2.3.1-bin-hadoop2.7.tgz /usr/etc/bigdata/ 4 、解压到当前文件夹 tar zxvf s ...
分类：
系统相关 时间：
2018-08-06 13:41:55
阅读次数：
131
package cn.sjq.bigdata.inverted.index;import java.io.IOException;import java.util.Iterator;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.Long
分类：
其他好文 时间：
2018-08-05 18:59:45
阅读次数：
166
华为大数据kafka操作web界面创建角色、用户。用户管理角色进入服务器环境，进入客户端目录/opt/hadoopclient，导入环境变量source bigdata_env。切换用户kinit kafka用户（kafka_test） bin/kafka-topics.sh --list --zo ...
分类：
其他好文 时间：
2018-08-05 14:20:27
阅读次数：
446
1、第一阶段MapReduce任务程序package cn.itcast.bigdata.index;import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import o
分类：
其他好文 时间：
2018-08-04 20:29:08
阅读次数：
147
1, 基本概念 在互联网技术发展到现今阶段，大量日常、工作等事务产生的数据都已经信息化，人类产生的数据量相比以前有了爆炸式的增长，以前的传统的数据处理技术已经无法胜任，需求催生技术，一套用来处理海量数据的软件工具应运而生，这就是大数据！ 换个角度说，大数据是： 1、有海量的数据 2、有对海量数据进行 ...
分类：
其他好文 时间：
2018-08-03 21:44:47
阅读次数：
208
1, 电脑环境准备 1), 关闭selinux 2), 时间同步 修改时间服务器配置, 并重启 修改需要同步的服务器配置, 并重启 执行时间同步 查看时间同步: 3), 修改hostname, 很多集群都需要执行这一个 4), jdk 版本 java -version 1.8.0_161 5), 设 ...
分类：
其他好文 时间：
2018-08-03 17:30:40
阅读次数：
234
package cn.sjq.bigdata.inverted.index;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.LongWritable;import org.apache
分类：
其他好文 时间：
2018-08-03 11:30:58
阅读次数：
217
1、员工对象EmployeeBeanpackage cn.sjq.bigdata.mr.self.join;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;import org.apache.hadoop.io.Writable;/** * 员工对象EmployeeBean * 由于该对象需
分类：
其他好文 时间：
2018-08-02 10:21:40
阅读次数：
176
1、EmployeeDeptBeanpackage cn.sjq.bigdata.mr.equal.join;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;import org.apache.hadoop.io.WritableComparable;/** * Emp表和Dept表合并后的
分类：
其他好文 时间：
2018-08-01 12:05:52
阅读次数：
137
