2019-11-24 20:24:56 1.产生密钥对： 可以看到.ssh目录下多了两个文件 2.将每台机器的公钥复制给其他机器。 3.此时再次开启Hadoop就不需要输入4次密码了 将文件放到HDFS分布式文件系统中 ...
分类：
其他好文 时间：
2019-11-24 23:55:29
阅读次数：
170
本文从实践出发，介绍如何在windows环境下搭建hadoop环境，并介绍一个绝大多数人都会遇到的报错：Error: JAVA_HOME is incorrectly set. Please update C:\hadoop-2.7.7\conf\hadoop-env.cmd 让你在本地单机模式下也... ...
bash 脚本 先创建一个文件 #!/bin/bash /usr/local/zookeeper/zookeeper-3.4.10/bin/zkServer.sh start 保存，执行 [root@hadoop ~]# ./zookeeper_run.sh 发现如下没有权限 -bash: ./zo ...
分类：
其他好文 时间：
2019-11-24 17:46:36
阅读次数：
58
开启zookeeper、hadoop、hbase： 打开eclipse创一个java project，然后导入所需jar包： 写好java代码，运行create，然后去hbase shell里查看： 运行delete： ...
分类：
编程语言 时间：
2019-11-24 13:44:30
阅读次数：
66
root用户可以访问自己的家目录，访问配置文件，访问普通用户的家目录 普通用户只能访问自己的家目录和root用户开放的目录 普通用户之间无法访问对方的家目录 创建用户，用id查看用户信息，root的uid是0，如果把普通用户uid改为0，则该普通用户变为root用户 创建普通用户，/home下会创建 ...
分类：
系统相关 时间：
2019-11-24 13:42:05
阅读次数：
81
Hadoop在多次运行下列指令： hadoop namenode format sbin/start dfs.sh 经常会出现没有启动datanode的情况。 运行命令: jps 发现没有datanode线程。 现给出原因和解决方案 原因 当我们使用hadoop namenode format格式化 ...
分类：
系统相关 时间：
2019-11-24 10:20:06
阅读次数：
274
背景：我自己的电脑配置太低，想在centos操作系统上安装CDH5.1.2并配置集群，我去阿里云上买了3台按流量计费的阿里云服务器。 大家一定要注意，配置，购买的阿里云服务器不要太低了。建议：3台2核8G内存的阿里云服务器。测试完毕后，请及时释放掉这三台服务器，否则阿里云会继续计费，很快消耗掉账户里 ...
分类：
其他好文 时间：
2019-11-23 23:47:10
阅读次数：
136
配置文件 core-site.xml 1,start all zk 2,start journalnode on each vm hadoop start journalnode 3, hadoop format 4, copy all hadoop tmp/dir to slaves 5, for ...
分类：
其他好文 时间：
2019-11-23 22:08:22
阅读次数：
76
==> 什么是parquet Parquet 是列式存储的一种文件类型 ==> 官网描述： Apache Parquet is a columnar storage format available to any project in the Hadoop ecosystem, regardless ...
分类：
其他好文 时间：
2019-11-23 19:56:07
阅读次数：
110
2019-11-22 17:15:27,705 FATAL [IPC Server handler 13 on 44844] org.apache.hadoop.mapred.TaskAttemptListenerImpl: Task: attempt_1574410493054_0011_m_00 ...
分类：
数据库 时间：
2019-11-23 17:52:36
阅读次数：
71
