讨论QQ：1586558083 目录 一、Spark中的基本概念 二、Spark的运行流程 2.1 Spark的基本运行流程 三、Spark在不同集群中的运行架构 3.1 Spark on Standalone运行过程 3.2 Spark on YARN运行过程 正文 回到顶部 一、Spark中的基 ...
分类：
其他好文 时间：
2019-06-11 13:07:24
阅读次数：
80
设置SSH免密钥 关于ssh免密码的设置，要求每两台主机之间设置免密码，自己的主机与自己的主机之间也要求设置免密码。 这项操作可以在admin用户下执行，执行完毕公钥在/home/admin/.ssh/id_rsa.pub node1与node2为namenode节点要相互免秘钥 HDFS的HA n ...
分类：
其他好文 时间：
2019-06-10 00:15:15
阅读次数：
120
首次使用Hadoop时，格式化文件系统命令：hdfs namenode -format 启动HDFS：start-dfs.sh 启动YARN：start-all.sh start-all.sh等价于start-dfs.sh + start-yarn.sh ...
分类：
其他好文 时间：
2019-06-07 17:54:24
阅读次数：
90
第一步：全局安装 yarn 第二步：安装 antd 第三步：安装 babel-plugin-import 第四步：暴露配置项 发现执行此操作报错了，不管他什么错，接着执行 然后执行 此时可以成功 .会自动生成一个config的文件夹,时候我们先配置dev模式 第五步：打开config文件夹下面的we ...
分类：
移动开发 时间：
2019-06-06 19:16:38
阅读次数：
232
一、zookeeper1、安装继续—>完成；二、HDFS1、安装继续—>完成；三、yarn、hive1、安装yarn继续—>完成；2、安装hive继续—>完成；3、测试hivehive> show tables;OKTime taken: 0.41 secondshive> create table... ...
分类：
其他好文 时间：
2019-06-06 15:46:38
阅读次数：
120
打算下载flink程序的日志看看，发现报错：yarn application -list -appStates ALL |grep Flink yarn logs -applicationId application_1554280683684_749610Log aggregation has n... ...
分类：
其他好文 时间：
2019-06-05 21:29:13
阅读次数：
248
学习RN导航导入 yarn add react-navigation # 或者通过npm安装： # npm install --save react-navigation 后报错Cannot read property 'Direction' of undefined 解决方案： 1.yarn ad ...
分类：
其他好文 时间：
2019-06-04 12:41:13
阅读次数：
118
一：Kafka概述 离线部分： Hadoop->离线计算(hdfs / mapreduce) yarn zookeeper->分布式协调（动物管理员） hive->数据仓库（离线计算 / sql）easy coding flume->数据采集 sqoop->数据迁移mysql->hdfs/hive ...
分类：
其他好文 时间：
2019-06-04 09:20:50
阅读次数：
124
官方说明文档：https://simulatedgreg.gitbooks.io/electron-vue/content/cn/ 项目：https://github.com/SimulatedGREG/electron-vue Step1.安装node.js和yarn npm install -g ...
分类：
其他好文 时间：
2019-06-03 12:31:26
阅读次数：
89
