websocket的即时通信非常的强大，这里我用node启动了一个服务进行websocket链接，然后再vue的view里面进行了链接，进行通信，废话不多说，直接上代码吧， 首先，我需要用到node的nodejs-websocket模块 使用yarn进行安装 1 yarn add nodejs-we ...
分类：
Web程序 时间：
2019-07-03 00:49:07
阅读次数：
230
Spark-submit测试任务提交./spark-submit--keytab/usr/local/noah/basp-dataprocess-log/conf/noah.keytabs--principalnoah@BJ.CTC--classorg.apache.spark.examples.SparkPi--masterlocal[*]../lib/spark-examples-1.6.3.
分类：
其他好文 时间：
2019-07-02 13:29:50
阅读次数：
343
主要原因在与spark2+的版本对jdk进行了检查导致的，换了低版本的jdk之后，发现版本不支持，spark2.+需要使用jdk1.8+以上的版本，把jdk版本切换过来。在yarn的配置文件添加一下配置即可。 最后，最后，最后，不要忘记重启hadoop，不然在去执行还是会报错的。 ...
分类：
其他好文 时间：
2019-07-01 13:44:31
阅读次数：
153
一、参数说明 启动Spark任务时，在没有配置spark.yarn.archive或者spark.yarn.jars时， 会看到不停地上传jar，非常耗时；使用spark.yarn.archive可以大大地减少任务的启动时间，整个处理过程如下。 二、spark.yarn.archive使用 1.在本 ...
分类：
编程语言 时间：
2019-06-30 17:29:19
阅读次数：
380
1.nodejs中文网http://nodejs.cn/download/下载最新版本 2.安装注意，虽然.msi包没有右键用管理员权限运行，如果直接双击安装可能会存在安装失败的问题。使用管理员权限运行cmd，找到安装包位置运行它 3.全局安装脚手架工具vue-cli, npm install -- ...
分类：
Web程序 时间：
2019-06-30 14:08:11
阅读次数：
131
前提： nodejs >= 10.0; 这里不推荐用官网的yarn安装antd的模块，因为后续会出错，错误如图： 也不推荐用npx方法来搭建react骨架，也会出错，让我们开始吧！！ 前端React+Antd框架搭建 1.安装并启动create-react-app骨架应用 打开cmd按顺序执行以下指 ...
分类：
Web程序 时间：
2019-06-30 12:33:46
阅读次数：
141
一、hadoop yarn 简介 二、YARN架构 1. ResourceManager 2. NodeMa ...
分类：
其他好文 时间：
2019-06-30 09:24:19
阅读次数：
178
https://yarnpkg.com/lang/en/docs/install/#windows-stable Introduction Yarn is a package manager for your code. It allows you to use and share code wit ...
分类：
其他好文 时间：
2019-06-30 09:24:08
阅读次数：
114
hadoop HA搭建参考：https://www.cnblogs.com/NGames/p/11083640.html （本节：用不到YARN 所以可以不用考虑部署YARN部分） Hadoop 使用分 布式文件系统，用于存储大数据，并使用 MapReduce 来处理。Hadoop 擅长于存储各种格 ...
分类：
其他好文 时间：
2019-06-30 09:17:07
阅读次数：
122
