.具体场景如下： spark1.6 升级 spark2.2 后 分析查询hbase 数据报异常： 后发现spark2.2 引入的包路径为 org.htrace htrace-core-3.0.4 版本的时候路径是 org.htrace 而3.1.0的时候已经贡献给Apache了，改叫org.apac ...
分类：
其他好文 时间：
2018-03-21 15:07:38
阅读次数：
207
Hadoop 2.6 CDH5.7.0 下载地址：http://archive.cloudera.com/cdh5/cdh/5 提供的镜像文件也遇到和我自己配置一样的问题 17/11/23 16:28:20 WARN metastore.ObjectStore: Failed to get data ...
分类：
其他好文 时间：
2018-03-11 11:56:00
阅读次数：
250
1.安装 下载cdh5(http://archive.cloudera.com/cdh5/cdh/5/) 中下载bin.tar到software，然后解压到应用文件夹（建议名称为app） 配置环境变量 2.启动与退出 1.spark 启动——进入${sparkhome} 执行 spark --mas ...
分类：
其他好文 时间：
2018-03-01 13:19:06
阅读次数：
1264
1. 软件版本号：Hadoop2.6.0（IDEA中源代码编译使用CDH5.7.3，相应Hadoop2.6.0），集群使用原生Hadoop2.6.4。JDK1.8，Intellij IDEA 14 。源代码能够在https://github.com/fansy1990/linear_regressi ...
分类：
其他好文 时间：
2018-02-12 13:49:03
阅读次数：
233
hue下载地址：https://github.com/cloudera/hue hue学习文档地址：http://archive.cloudera.com/cdh5/cdh/5/hue-3.7.0-cdh5.3.6/manual.html 我目前使用的是hue-3.7.0-cdh5.3.6 hue（ ...
分类：
数据库 时间：
2018-02-10 20:05:26
阅读次数：
325
2、mkdir hadoop fs -mkdir 3、df du [hadoop@h201 hadoop-2.6.0-cdh5.5.2]$ hadoop fs -df /18/01/28 22:49:51 WARN util.NativeCodeLoader: Unable to load nati ...
分类：
其他好文 时间：
2018-01-29 19:11:59
阅读次数：
1194
铭文一级： Spark Streaming is an extension of the core Spark API that enables scalable, high-throughput, fault-tolerant stream processing of live data stre ...
分类：
其他好文 时间：
2018-01-28 11:24:12
阅读次数：
210
铭文一级： 第五章：实战环境搭建 Spark源码编译命令:./dev/make-distribution.sh \--name 2.6.0-cdh5.7.0 \--tgz \-Pyarn -Phadoop-2.6 \-Phive -Phive-thriftserver \-Dhadoop.versi ...
分类：
其他好文 时间：
2018-01-27 19:14:31
阅读次数：
169
