架构 Driver Program:每个 Spark 应用的主程序 Spark Context:在 Driver 里面构建,用于协调、调度在各个节点运行的进程 Cluster Manager:管理节点,分配资源(可以是 Spark standalone、Mesos、Yarn、K8S) Worker ...
分类:
其他好文 时间:
2020-05-22 09:37:29
阅读次数:
62
1 脚本启动方式 1. 创建/data目录,关闭防火墙,selinux;上传etcd软件包 2. 解压软件包 3. 配置 启动文件 1)node1节点 2)node2节点 3)node3节点 4. 给etcd.sh赋予执行权限并启动 5. 查看cluster成员 6. 查看cluster健康状态 2 ...
分类:
其他好文 时间:
2020-05-21 21:14:46
阅读次数:
56
win7、win8 系统 win7、win8 等需要利用 docker toolbox 来安装,国内可以使用阿里云的镜像来下载,下载地址:http://mirrors.aliyun.com/docker-toolbox/windows/docker-toolbox/ 安装比较简单,双击运行,点下一步 ...
平时开发中经常会遇到抓取某个页面内容,但是有时候某些页面需要登陆才能访问,最常见的就是论坛,这时候我们需要来使用curl模拟登陆。 以下讨论的是和伪造模拟客户端COOKIE登陆采集抓取远程网址相关的PHP通过伪造和模拟客户端COOKIE登陆来采集抓取远程网址页面内容的方法教程文章,内容是本站精心挑选 ...
分类:
Web程序 时间:
2020-05-20 12:03:44
阅读次数:
81
1 必选java.lang.*基础:1.java.lang.Iterable2.java.lang.Serializable3.java.lang.Cloneable4.java.lang.Comparable5.java.lang.Runnable6.java.lang.Cloneable集合:1 ...
分类:
编程语言 时间:
2020-05-20 10:46:46
阅读次数:
77
#coding=utf-8 from selenium import webdriver driver = webdriver.Chrome() driver.maximize_window() driver.get("https://www.baidu.com") driver.quit() 以下 ...
分类:
编程语言 时间:
2020-05-18 20:26:45
阅读次数:
117
promise的理解和使用 1. Promise是什么 1.1 promise 的理解 1. 抽象表达: Promise 是 JS 中进行异步编程的新的解决方案(旧的是纯回调形式) 2. 具体表达: (1)从语法上说:Promise 是一个构造函数 (2)从功能上说:promise 对象用来封装一个 ...
分类:
其他好文 时间:
2020-05-18 18:49:39
阅读次数:
76
<plugin> <!-- 指定maven编译的jdk版本,如果不指定,maven3默认用jdk 1.5 maven2默认用jdk1.3 --> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-compiler-plugin ...
分类:
其他好文 时间:
2020-05-18 18:43:12
阅读次数:
54
golang 在使用 mysql 的时候会用到 database/sql 这个库,每次都在黑盒使用它,有必要来梳理一下整个请求流程和细节,以免以后碰到问题会有解决的思路。 阅读之前的几个问题 sql 的连接池的连接怎么维护的? Query / Exec 如何获取查询的连接? 连接池的连接如何释放的? ...
分类:
数据库 时间:
2020-05-18 11:58:05
阅读次数:
60
提示的错误信息为: Configuration file at updated successfully! Updates successful. Rebuilding in 5 seconds. Building app standard_init_linux.go:211: exec user ...
分类:
其他好文 时间:
2020-05-18 01:04:34
阅读次数:
88