既然是伪分布式，那就不可避免的设计到重启Hadoop服务或者重启Hadoop服务器的情况，正确的停止和重启是很有必要的。 首先是Hadoop服务的停止，使用 ./sbin/stop-all.sh脚本来停止所有的Hadoop服务，这个脚本包含了两个脚本的内容，一个是./sbin/stop-dfs.sh ...
分类：
其他好文 时间：
2018-04-09 11:21:27
阅读次数：
161
hbase下载：点此链接 （P.S.下载带bin的） 下载文件放入虚拟机文件夹，打开，放在自己指定的文件夹 修改环境配置 修改hbase安装目录下的conf/hbase-env.sh文件（这里两个地方要细心找一下，在一堆的注释里面，找到以后把前面 # 删去以后再修改） 修改hbase安装目录下的co ...
分类：
其他好文 时间：
2018-04-07 22:43:25
阅读次数：
200
一、HDFS伪分布式环境搭建Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实
分类：
其他好文 时间：
2018-04-07 12:51:45
阅读次数：
183
大数据解决四大核心问题： 数据的存储（Big Data Storage），海量数据需要处理和分析，但前提是要进行有效的存储。Hadoop的诞生突破了传统数据文件系统的单机模式。HDFS使得数据可以跨越不同的机器与设备，并且用一个路径去管理不同平台上的数据。 数据的计算（Data Calculatio ...
分类：
其他好文 时间：
2018-04-01 21:53:56
阅读次数：
140
1. 软硬件环境 CentOS 7.2 64 位 OpenJDK- 1.8 Hadoop- 2.7 2. 安装SSH客户端 安装SSH 安装SSH： 安装完成后，可以使用下面命令进行测试： 输入 root 账户的密码，如果可以正常登录，则说明SSH安装没有问题。 3.安装java环境 安装 JDK ...
分类：
其他好文 时间：
2018-03-31 00:38:34
阅读次数：
368
伪分布式就是只有一台机器，既是namenode又是datanode。一台阿里云服务器（centos）即可完成。 Java环境 首先需要安装Java环境，下载jdk的安装包，解压到/usr/java/，然后配置环境变量。 建立信任关系 这个命令的作用是生成公钥和私钥，并且在该用户的根目录下生成.ssh ...
分类：
其他好文 时间：
2018-01-04 00:24:44
阅读次数：
199
1.创建hadoop账户,创建用户的home目录并设置密码。（useradd -m hadoop ） 2.本步骤可以不做（我是为了方便，给hadoop赋予了root权限）（vi /etc/sudoers） 以上的设置使用sudo不用输入密码 (注意：要在root用户下且修改完成要esc :wq保存) ...
分类：
其他好文 时间：
2018-01-02 23:26:36
阅读次数：
190
<?xml version="1.0"?><!-- core-site.xml --><configuration><property><name>fs.defaultFS</name><value>hdfs://localhost/</value></property></configuratio ...
分类：
其他好文 时间：
2017-12-14 14:53:14
阅读次数：
115
下载hadoop1.0.4版本，和jdk1.6版本或更高版本：1. 安装JDK，安装目录大家可以自定义，下面是我的安装目录： 配置环境变量： 将环境变量添加到profile文件底部： 激活环境变量： 2. 安装hadoop创建hadoop用户及其hadoop组。配置IP对应域名在 在hosts文件底 ...
分类：
其他好文 时间：
2017-11-24 19:14:32
阅读次数：
126
