在flink集群中提交了一个job报错如下大概看出是没有DataNode,这让人很奇怪 通过jps命令在主节点看到了namenode,但是在DataNode端执行jps没有DataNode [root@devopes ~]# jps 5347 TaskManagerRunner 18788 Name ...
分类:
其他好文 时间:
2020-09-18 17:26:11
阅读次数:
71
jenkins结合cygwin软件实现从centos发布代码rsync到windows server2019的过程 1.下载cygwin这个软件打开https://cygwin.com/install.html, 针对不同的windows类型下载,本机下载的是(https://cygwin.com/ ...
Kafka是Apache下的一个子项目,是一个高性能跨语言分布式发布/订阅消息队列系统,吞吐速率非常快,可以作为Hadoop的日志收集。Kafka是一个完全的分布式系统,这一点依赖于Zookeeper的分布式实现。 本文为新手准备,从Kafka的一些术语概念方面去认识Kafka。 Broker Ka ...
分类:
其他好文 时间:
2020-09-18 17:19:41
阅读次数:
37
Hadoop HA 集群搭建 Hadoop HA 集群搭建Hadoop 完全分布式环境搭建集群规划集群部署前提Hadoop伪分布式环境搭建配置IP映射安装 Java 与 Hadoop配置 Hadoop配置 MapReduce 与 YARN集群配置配置基本参数配置 SSH 免密登录格式化 HDFS启动 ...
分类:
其他好文 时间:
2020-09-18 03:33:30
阅读次数:
38
今天主要来看一下Redis的安装以及集群搭建(我也是第一次搭建)。 环境:CentOS 7.1,redis-5.0.7 一、单机安装 1、将Redis安装包放置服务器并解压 2、进入redis安装目录(笔者的是/usr/soft/redis-5.0.7)执行make && make install命 ...
分类:
其他好文 时间:
2020-09-18 03:30:47
阅读次数:
33
npm install qs 安装 qs可以用来处理数据 而qs.stringify()将对象 序列化成URL的形式,以&进行拼接。 JSON是正常类型的JSON,请对比一下输出 var a = {name:'hehe',age:10}; qs.stringify(a) // 'name=hehe& ...
分类:
移动开发 时间:
2020-09-18 03:30:30
阅读次数:
45
一、安装squid yum install squid openssl* -y 二、配置 vim /etc/squid/squid.conf #(修改以下配置) acl localnet src 10.10.10.0/24 #允许段 http_port 3128 #代理端口 三、启动 systemc ...
分类:
其他好文 时间:
2020-09-18 02:20:32
阅读次数:
32
一、大数据 大数据的特性 (一)大体量,可从数百TB,PB,EB (二)多样性,大数据包括各种格式和形态的数据 (三)时效性,很多大数据需要在一定的时间限度下得到及时处理 (四)准确性,处理的结果一定要准备性 (五)大价值,大数据包含很多的深度的价值,大数据分析挖掘和利用将带来巨大的商业价值 二、H ...
分类:
其他好文 时间:
2020-09-18 02:20:12
阅读次数:
35
一、安装 yum install -y ansible 二、密钥授权 ssh-keygen -t rsa注释:-t type指定要创建的密钥类型。 rsa 加密算法 三、模块介绍(https://www.cnblogs.com/mcsiberiawolf/articles/10056777.html ...
分类:
其他好文 时间:
2020-09-18 02:00:30
阅读次数:
37
##升级 openssl openssl versions yum install -y zlib gcc-c++ gcc wget https://www.openssl.org/source/openssl-1.1.1g.tar.gz && tar -zxvf openssl-1.1.1g.ta ...
分类:
Web程序 时间:
2020-09-18 01:49:44
阅读次数:
54