【 前情提要 】最近在gayhub上面得到一个开源项目，遂准备研究一下源码，当然第一步就是要把项目运行起来。然后看了一下技术栈，发现包管理工具是使用yarn，以前也听说过yarn但是也没有具体使用过，只知道是facebook发布的包管理程序。 壹、安装 1.下载node.js，使用npm安装 2.安 ...
分类：
其他好文 时间：
2019-08-11 11:04:34
阅读次数：
83
【**前情提要**】最近在gayhub上面得到一个开源项目，遂准备研究一下源码，当然第一步就是要把项目运行起来。然后看了一下技术栈，发现包管理工具是使用yarn，以前也听说过yarn但是也没有具体使用过，只知道是facebook发布的包管理程序。 # 壹、安装 1.下载node.js，使用npm安装 ...
分类：
其他好文 时间：
2019-08-11 00:27:10
阅读次数：
82
自己的主机上的Hadoop版本是2.7.6，是测试用的伪分布式Hadoop，在前段时间部署了Hive on Spark，但由于没有做好功课，导致了Hive无法正常启动，原因在于Hive 3.x版本不适配Hadoop 2.x版本。之前我在学校服务器上部署的Hadoop版本是3.1.2，现打算将自己的从 ...
分类：
其他好文 时间：
2019-08-09 23:24:41
阅读次数：
140
一、问题描述 日志文件信息如下： 二、解决办法一 i. 删除 yarn-nm-state 目录的所有文件再次启动 ii. 再次启动 NodeManager 组件 我这里使用的是 Ambari 来管理的，直接就Web界面操作，也可以使用命令操作启动。 iii. 查看是否启动成功，已启动成功 三、解决办 ...
分类：
其他好文 时间：
2019-08-08 13:32:07
阅读次数：
86
Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。 这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooK ...
分类：
其他好文 时间：
2019-08-07 19:07:50
阅读次数：
85
本次学习如何从零开始搭建一个react官方提供的脚手架并添加less配置项以及如何处理在搭建过程中出现的bug 在此过程中默认使用yarn工具， 使用官方提供的命令：（此过程可能会因为个人网速不同，创建的时间也会有所不一样） 如图所示我们已经创建了一个基本的脚手架，但是由于在项目中我们会安装less ...
分类：
移动开发 时间：
2019-08-07 15:57:31
阅读次数：
168
webpack第9天 今天目标： 能够安装webpack 能够配置打包模式、入口和出口文件 能够编译index.html模板页面 能够配置实时打包功能 能够安装配置使用css相关loader 能够安装配置使用less相关loader 能够安装配置使用img相关loader 能够安装配置使用babel ...
分类：
Web程序 时间：
2019-08-01 17:27:03
阅读次数：
139
Apache Spark的高性能一定程度上取决于它采用的异步并发模型（这里指server/driver 端采用的模型），这与Hadoop 2.0（包括YARN和MapReduce）是一致的。Hadoop 2.0自己实现了类似Actor的异步并发模型，实现方式是epoll+状态机，而Apache Sp ...
分类：
编程语言 时间：
2019-07-30 21:30:40
阅读次数：
125
前言 本文主要是想简要说明Flink在集群部署、任务提交、任务运行过程中资源情况，若表述有误欢迎大伙留言分享，非常感谢！ 一、集群部署阶段 集群部署这里指的是Flink standalone模式，因为在Yarn模式（包括session、single job模式）是可以仅通过Flink client提 ...
分类：
其他好文 时间：
2019-07-29 00:54:27
阅读次数：
108
Vue 是专注于构建用户界面层的渐进式 JavaScript 框架，它可以很方便地与各种中间件或者后端应用程序集成使用。Vue 为我们构建界面层提供了大量有用的工具，助我们构建复杂的单页应用。Vue 的特性包括但不限于： 响应式界面 声明式路由 数据绑定 指令 组件 事件处理 属性推断 过滤 Vue ...
分类：
其他好文 时间：
2019-07-28 20:04:16
阅读次数：
669
