第4章 Hadoop运行模式4.1 本地运行模式4.1.1 官方Grep案例4.1.2 官方WordCount案例4.2 伪分布式运行模式4.2.1 启动HDFS并运行MapReduce程序4.2.2 启动YARN并运行MapReduce程序4.2.3 配置历史服务器4.2.4 配置日志的聚集4.2 ...
分类：
其他好文 时间：
2019-02-03 10:26:29
阅读次数：
284
buckaroo 是一款去中心化的c++ 包管理工具，使用上，类似yarn（nodejs），cargo （rust） ，使用buckaroo 我们可以很容易集成一个大规模的项目 支持以下特性 直接从GitHub，BitBucket，GitLab，托管Git和HTTP中提取依赖项 完全可重现的构建和依 ...
分类：
编程语言 时间：
2019-02-02 12:41:47
阅读次数：
197
maven依赖 ch.ethz.ganymed ganymed-ssh2 262 import ch.ethz.ssh2.Connection; import ch.ethz.ssh2.Session; import java.io.IOException; import java.io.Input... ...
分类：
编程语言 时间：
2019-01-31 20:55:42
阅读次数：
136
先从网上copy一些优势点 1、高容错性数据自动保存多个副本。它通过增加副本的形式，提高容错性。某一个副本丢失以后，它可以自动恢复，这是由 HDFS 内部机制实现的，我们不必关心。 2、适合批处理它是通过移动计算而不是移动数据。它会把数据位置暴露给计算框架。 3、适合大数据处理处理数据达到 GB、T ...
分类：
其他好文 时间：
2019-01-31 13:04:52
阅读次数：
204
Node JS World Environment tested on Ubuntu Install nvm/node/npm/yarn nvm : node version manager node: node js npm: node package manager yarn: a faster ...
分类：
Web程序 时间：
2019-01-31 00:11:00
阅读次数：
195
Eclipse项目打包1.export2.通过maven打包，切入到项目目录下执行命令mvn clean package Mapreduce提交YARN集群运行 将jar包传到hadoop目录下运行格式：bin/hadoop jar jar包名 包名（代码的包名）.类名 +参数（输入路径输出路径）就 ...
分类：
其他好文 时间：
2019-01-28 16:13:02
阅读次数：
161
yarn python 1.Ctrl+R 输入 %APPDATA% 2.新建pip目录,并在pip目录下新建pip.ini 3.在pip.ini中输入: maven 配置本地macen的setting.xml文件 ...
错误信息:“There are no scenarios ; must have at least one" 背景:在将vscode自动化构建编译打包时出现这种情况，主要是执行yarn这一步出现的。 本次这个另外的虚拟机环境有点乱，主要体现为版本不统一(比如node.js要求为8.12.0及其9以下 ...
分类：
移动开发 时间：
2019-01-28 01:07:40
阅读次数：
400
https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.6.5/bk_yarn-resource-management/content/ch_yarn_rest_apis.html ...
// 需要安装的库yarn add raven-js --saveyarn add raven-for-redux --save // 在创建store的地方import * as Raven from "raven-js";import * as createRavenMiddleware fro ...
分类：
Web程序 时间：
2019-01-26 21:01:09
阅读次数：
335
