简介 Spark有3种集群管理器: Standalone Hadoop YARN 又分为yarn client与yarn cluser Apache Mesos 生产环境中一般使用yarn cluser模式 个人理解 yarn主要有两个作用. 一个是创建container以此来分配计算资源 另外一个 ...
分类:
其他好文 时间:
2020-05-24 11:33:26
阅读次数:
64
本题解法主要维护两个栈,一个是价格prices的单调递减栈。一个是weights栈随着prices 一起进栈出栈,计算w。 因为两个栈是一起进出,所以可以将两个栈写在一起Deque<List<>> JAVA class StockSpanner { Deque<Integer> prices; De ...
分类:
其他好文 时间:
2020-05-23 18:42:07
阅读次数:
61
Given inorder and postorder traversal of a tree, construct the binary tree. Note:You may assume that duplicates do not exist in the tree. For example, ...
分类:
其他好文 时间:
2020-05-22 13:12:40
阅读次数:
54
SELECT id, `name`,( 6378137 * ACOS ( COS ( RADIANS(60.000000) ) * COS( RADIANS( lat ) ) * COS( RADIANS( lng ) - RADIANS(70.000000) ) + SIN ( RADIANS(6 ...
分类:
数据库 时间:
2020-05-22 09:48:40
阅读次数:
136
架构 Driver Program:每个 Spark 应用的主程序 Spark Context:在 Driver 里面构建,用于协调、调度在各个节点运行的进程 Cluster Manager:管理节点,分配资源(可以是 Spark standalone、Mesos、Yarn、K8S) Worker ...
分类:
其他好文 时间:
2020-05-22 09:37:29
阅读次数:
62
1 脚本启动方式 1. 创建/data目录,关闭防火墙,selinux;上传etcd软件包 2. 解压软件包 3. 配置 启动文件 1)node1节点 2)node2节点 3)node3节点 4. 给etcd.sh赋予执行权限并启动 5. 查看cluster成员 6. 查看cluster健康状态 2 ...
分类:
其他好文 时间:
2020-05-21 21:14:46
阅读次数:
56
当时K8S环境想用来设计部署微服务这块的架构才发现的这个问题 我的K8S集群是使用kubeadm安装的,当时也是跟着网上教程走的,并没有注意网络路由使用的iptables规则 现在出现pod不能ping通service或者ping通CLUSTER-IP的问题,导致如果我再集群里部署注册中心,并不能正 ...
分类:
其他好文 时间:
2020-05-21 17:45:11
阅读次数:
274
原文链接:兼容go redis cluster的pipeline批量 前言: redis cluster集群机制是不错,但因为是smart client设计,没有proxy中间层,导致很多redis批量命令在不同slot时不能适配,比如 mset、mget、pipeline等。 该篇文章讲述了red ...
分类:
其他好文 时间:
2020-05-20 12:12:35
阅读次数:
49
博文目录一、编写Dockerfile部署Tomcat服务二、编写Dockerfile部署Apache服务1、编写Dockerfile文件2、docker宿主机或者客户端访问httpd01容器中的apache服务3、登录httpd01容器,查看访问日志三、编写Dockerfile部署Nginx服务1、编写Dockerfile文件2、使用docker宿主机或者客户端访问nginx01容器中的nginx
分类:
数据库 时间:
2020-05-19 14:50:05
阅读次数:
67
概念及示例 描述了一个或多个用户可寻址目标到网格内实际工作负载之间的映射 。 虚拟服务让您配置如何在服务网格内将请求路由到服务,这基于 Istio 和平台提供的基本的连通性和服务发现能力。每个虚拟服务包含一组路由规则,Istio 按顺序评估它们,Istio 将每个给定的请求匹配到虚拟服务指定的实际目 ...
分类:
其他好文 时间:
2020-05-19 12:34:05
阅读次数:
65