## 04、Spark Standalone集群搭建 ### 4.1 集群概述 独立模式是Spark集群模式之一，需要在多台节点上安装spark软件包，并分别启动master节点和worker节点。master节点是管理节点，负责和各worker节点通信，完成worker的注册与注销。worker节... ...
分类：
其他好文 时间：
2018-08-27 21:39:30
阅读次数：
125
有需要修改Chromium中的Settings，增加本地机器亮度调节，发现Chromium自带的WebUI的功能，可以在这个基础上进行修改。 ...
分类：
其他好文 时间：
2018-08-16 14:07:36
阅读次数：
137
pyspider是国人binux编写的强大的网络爬虫框架，它带有强大的WebUI、脚本编辑器、任务监控器、项目管理器以及结果处理器，同时支持多种数据库后端、多种消息队列，另外还支持JavaScript渲染页面的爬取，使用起来非常方便。 pyspider是支持JavaScript渲染的，而这个过程是依 ...
分类：
其他好文 时间：
2018-07-21 11:56:16
阅读次数：
134
vedioCSDN-concourse的认知thedocsofbeginnerconcoursearchitechureATC-airtrafficcontrolATC是Concourse的心脏。运行着webui和api，是负责调度pipeline的，ATC调度的pipeline以及构建的日志存储在postgresql中[bosh]atcjob:https://bosh.io/jobs/atc?s
分类：
其他好文 时间：
2018-07-07 17:46:24
阅读次数：
621
小伙伴们在写webUI自动化时是否会有这样的困惑，自己写的xpath不知道对不对，下面就教大家一个方法来检验 首先打开浏览器输入你想要测试的url 按下键盘上的F12 在console或控制台输入 $x("xpath") xpath： 元素的xpath 如果里面的[]里面包含"" 请改为‘’举个例子 ...
分类：
其他好文 时间：
2018-07-06 19:39:28
阅读次数：
594
SPARK_MASTER_HOST=sparkmaster.smartmap.comSPARK_MASTER_PORT=7077SPARK_WORKER_CORES=1SPARK_WORKER_MEMORY=1024MSPARK_MASTER_WEBUI_PORT=8080SPARK_CONF_DI... ...
分类：
其他好文 时间：
2018-07-06 01:19:55
阅读次数：
233
因为之前逻辑设计有点小问题，所以修改了一下： 增加core._User的Table： 在Web端需要传入StringID（也即微软Identity自动生成的AspNetUsers Table的ID）。 WebUI的Project增加Service： /Services/UserManagerServ ...
分类：
其他好文 时间：
2018-06-25 20:33:48
阅读次数：
202
1. 安装transmission，我用的是transmission daemon + webUI 参考https://wiki.archlinux.org/index.php/Transmission_(%E7%AE%80%E4%BD%93%E4%B8%AD%E6%96%87) 和 https:/ ...
分类：
系统相关 时间：
2018-06-21 11:47:10
阅读次数：
403
一 前言元素定位，是操作元素的第一步，也是WebUI自动化的难点和核心。 二 元素定位方法selenium提供了内置的方法完成对待操作元素的定位，主要分为8类，其中，每类又可细分为定位单个元素和定位多个元素，另外还提供了2个私有方法。详细如下：定位单个元素· find_element_by_i
分类：
编程语言 时间：
2018-06-18 18:22:18
阅读次数：
160
semantic ui 栅格问题 在column里设置h1 line-height会出现超出设置值的情况 column之间没有间隙，但column内会有固定paddin 在column里设置h1 line-height会出现超出设置值的情况 column之间没有间隙，但column内会有固定padd ...
分类：
Web程序 时间：
2018-06-17 20:15:24
阅读次数：
192
