执行hadoop的相关命令时，总提示如下： ]$ hadoop fs -ls / 2020-03-09 16:09:39,384 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... ...
分类：
其他好文 时间：
2020-03-09 16:21:24
阅读次数：
52
1、访问地址 http://192.168.0.123:8080/dfshealth.html#tab-overview 2、浏览文件 ...
分类：
Web程序 时间：
2020-03-07 12:39:43
阅读次数：
92
一、环境准备 1.添加插件到eclipse plugins目录下就可以了 2.把Window编译后的hadoop的文件放到 hadoop的bin目录下 3.配置环境变量 HADOOP_HOME=E:\hadoop\hadoop-2.7.7 Path=%HADOOP_HOME%\bin;%HADOOP ...
分类：
其他好文 时间：
2020-03-06 17:32:14
阅读次数：
84
简单地说，MapReduce就是"任务的分解与结果的汇总"。 MapReduce 是一个分布式运算程序的编程框架，是用户开发“基于 hadoop 的数据分析 应用”的核心框架。MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各 ...
分类：
其他好文 时间：
2020-03-06 11:21:35
阅读次数：
60
Ranger是什么ApacheRanger是Hadoop平台上操作、监控、管理数据安全的集中式安全管理框架。Ranger的愿景是在ApacheHadoop生态系统中提供全面的安全性。目前，ApacheRanger支持以下Apache项目的细粒度授权和审计：（1）ApacheHadoop（2）ApacheHive（3）ApacheHBase（4）ApacheStorm（5）ApacheKnox（6）
分类：
其他好文 时间：
2020-03-06 11:11:47
阅读次数：
98
速点链接加入高手战队：http://www.dajiangtai.com/course/112.do唯一由中国人主导的Apache顶级项目Kylin到底是什么ApacheKylin（ExtremeOLAPEngineforBigData）是一个开源的分布式分析引擎，为Hadoop等大型分布式数据平台之上的超大规模数据集提供标准SQL查询及多维分析（OLAP）能力，并提供亚秒级的交互式分析功能。它最
分类：
其他好文 时间：
2020-03-05 19:33:43
阅读次数：
77
关闭虚拟机之后重启hadoop，想要用删除之前在hdfs运行的output文件，显示： hadoop之Name node is in safe mode 处理方法： bin/hadoop dfsadmin -safemode leave ...
分类：
其他好文 时间：
2020-03-05 15:26:59
阅读次数：
67
一、下载hadoop-eclipse-plugin-2.7.3.jar插件放到eclipse的plugins的目录下 二、把Window编译后的hadoop的文件放到 hadoop的bin目录下 三、添加环境变量的支持 HADOOP_HOME=e:hadoop/hadoop-2.7.7 Path=% ...
分类：
其他好文 时间：
2020-03-05 10:35:29
阅读次数：
71
运用MapReduce来统计一个文章的重复的字数 1.准备一篇文章，并且上传到hdfs 注意编码是要utf 8 这样上传到liunx上面才不会乱码 先上传到linux ：rz 在上传到hdfs ：hadoop fs put 琵琶行.txt / 2.写MapReduce程序 MapReduce基于ya ...
分类：
其他好文 时间：
2020-03-05 00:59:47
阅读次数：
69
hadoop主备高可用故障转移机制 NameNode和2nn zookeeper保姆机制 zookeeper全新选举机制 zookeeper之非全新选举 NameNode和2nn hbase之存数据流程 hbase之创建表流程 hbase之查询路由(解决元数据信息不断增大 hbase之rowkey设 ...
分类：
其他好文 时间：
2020-03-04 22:29:35
阅读次数：
152
