一、环境准备： 1、下载安装VSCode，Node.js，Yarn 2、打开命令行终端或powershell，输入yarn global add create-react-app安装react的脚手架create-react-app 3、打开VSCode，安装相应插件 必要：ESLint、Docum ...
分类：
其他好文 时间：
2018-11-27 11:13:10
阅读次数：
1195
1.简介Hadoop是一款开源的大数据通用处理平台，其提供了分布式存储和分布式离线计算，适合大规模数据、流式数据(写一次,读多次)，不适合低延时的访问、大量的小文件以及频繁修改的文件。*Hadoop由HDFS、YARN、MapReduce组成。Hadoop的特点：1.高扩展(动态扩容)：能够存储和处理千兆字节数据(PB)，能够动态的增加和卸载节点，提升存储能力(能够达到上千个节点)2.低成本：只需
分类：
其他好文 时间：
2018-11-26 20:01:57
阅读次数：
198
# 安装 sqoop # 环境变量 # node1 # 用户 sqoop 登录 mysql # 启动 hadoop # 导入表数据到HDFS # node1 # 如果包下面的错误请将 $HADOOP_HOME/etc/hadoop/yarn-site.xml 文件进行调整# ERROR tool.I ...
分类：
其他好文 时间：
2018-11-25 21:16:48
阅读次数：
212
第1章 本地与服务器环境准备介绍微信公众号/小程序/域名/服务器的申请选购流程，在本地与线上服务器分别对项目的运行环境进行搭建部署，如 Node.js/Vue/Yarn/PM2/Nginx/MongoDB 等等，同时会来简单介绍下从本地通过 PM2 利用 Git 仓库直接往线上服务器部署以及 Ngi ...
分类：
数据库 时间：
2018-11-25 13:13:22
阅读次数：
221
"文档" yarn add @nestjs/passport passport passport http bearer @nestjs/jwt passport jwt auth.service.ts jwt.strategy.ts app.module.ts app.controller.ts ...
分类：
Web程序 时间：
2018-11-25 01:24:51
阅读次数：
1787
采坑描述：yarn全局安装模块后但仍提示无法找到 解决： 1.先查看一下yarn的bin目录，输入yarn global bin 2.然后将该路径加入到path中，对于windows中直接将该目录加入到path中 3.关闭cmd重启，umi -v生效 ...
分类：
其他好文 时间：
2018-11-23 21:31:29
阅读次数：
2711
介绍 官网下载 https://www.apache.org/dyn/closer.lua/flink/flink 1.6.1/flink 1.6.1 bin hadoop28 scala_2.11.tgz flink集群地址 ddcve: master dddve: slave ddeve: sl ...
分类：
其他好文 时间：
2018-11-23 18:39:27
阅读次数：
325
1、检查是否正确的启动了resourcemanager服务 若是没有启动，请检查yarn-site-xml配置 2、若是启动了 1、检查客户机和虚拟机之间是否能够相互ping通 2、检查虚拟机防火墙是否关闭 3、排查 1、首先，各个虚拟机和客户端之前都能ping通，虚拟机都能上外网，说明网络没有问题 ...
分类：
其他好文 时间：
2018-11-22 17:12:53
阅读次数：
2173
, INFO mapreduce.Job: The url to track the job: http://localhost:8080/ 配置mapred-site.xml ...
分类：
其他好文 时间：
2018-11-22 11:50:11
阅读次数：
150
org.apache.spark.deploy.yarn.Client.scala中的monitorApplication方法： 其中： yarn state为finished的时候的状态细分不够明确，将原来的 reportLauncherState(SparkAppHandle.State.FAI ...
分类：
其他好文 时间：
2018-11-22 02:28:07
阅读次数：
306
