环境准备 三台服务器(由于我是学习环境,所以三台服务器不属于同一内网),配置如下: 公网ip 119.29.186.83 内网ip10.104.157.113 公网ip 119.29.250.47 内网ip 10.104.9.181 公网ip 119.29.251.99 内网ip 10.104.19 ...
分类:
其他好文 时间:
2017-03-30 18:53:16
阅读次数:
111
简介: Cloudera Manager 是 Cloudera 公司推出的 Hadoop 集群管理工具,通过该管理工具可以方便的部署、配置、监控集群。 Cloudera 公司自己发布的 Hadoop 版本叫 CDH,全称 Cloudera Distribution Hadoop。 环境介绍: 192 ...
分类:
其他好文 时间:
2017-03-27 13:34:17
阅读次数:
466
1. 软件版本:IDE:Intellij IDEA 14,Java:1.7,Scala:2.10.6;Tomcat:7,CDH:5.8.0; Spark:1.6.0-cdh5.8.0-hadoop2....
分类:
编程语言 时间:
2017-03-18 21:34:09
阅读次数:
500
CDH版本:5.10.0 IDE环境:win7 64位 MyEclipse2015 spark模式:yarn 提交模式:yarn-client 之前同样的IDE环境下,向alone模式的spark提交任务,一直很顺利,今天测了一下spark on yarn模式,提交只能是yarn-client模式, ...
Microsoft Visual Studio Enterprise 2017 企业版 KEY:NJVYC-BMHX2-G77MM-4XJMR-6Q8QFMicrosoft Visual Studio Professional 2017 专业版KEY:KBJFW-NXHK6-W4WJM-CRMQB- ...
分类:
其他好文 时间:
2017-03-11 18:45:48
阅读次数:
176
Visual Studio 2017(VS2017) 企业版 Enterprise 注册码:NJVYC-BMHX2-G77MM-4XJMR-6Q8QFVisual Studio 2017(VS2017) 专业版Professional 激活码key:KBJFW-NXHK6-W4WJM-CRMQB-G ...
分类:
其他好文 时间:
2017-03-09 13:01:50
阅读次数:
276
hadoop生态圈框架工具甚多,自己整合起来很是繁琐,特别是oozie以及hue结合来实现hive、mr、spark等定时依赖任务更是一步一个坑,为了减少踩坑,只好从apache hadoop,转向CDH。 两个各有利弊,CDH贵在整合方便。本次教程大部分来自http://www.cnblogs.c ...
分类:
其他好文 时间:
2017-03-08 13:45:07
阅读次数:
993
The difference (in .NET) between Rijndael and AES is that Rijndael allows the block size to change, but AES does not. Since RijndaelManaged's default ...
分类:
Web程序 时间:
2017-03-01 00:31:58
阅读次数:
843
背景 某天凌晨四点左右,HBase RegionServer 宕机自动拉起,查看日志发现是HDFS 在进行HA切换,15次重试仍连不上可写的active,于是挂了。所以根本问题是hdfs。 日志定位 通过日志定位,发现JournalNode一直在抛错,几乎打满了日志: 该链接CDH专家表示 ([So ...
分类:
其他好文 时间:
2017-02-28 13:32:00
阅读次数:
470