（1）SparkStreaming整合kafka两种方式对比Direct方式的优缺点分析：优点：简化并行(SimplifiedParallelism)。不现需要创建以及union多输入源，Kafkatopic的partition与RDD的partition一一对应。高效(Efficiency)。基于Receiver-based的方式保证数据零丢失（zero-dataloss）需要配置spark.s
分类：
其他好文 时间：
2019-01-08 10:55:39
阅读次数：
176
（1）部署部署方式：sparkstandalone集群、yarn集群、meoss集群...driver的HA：如果希望driver程序在失败之后自动重启，那么需要在程序中使用getOrcreate方法重构streamingContext对象，以及在spark-submit中添加参数。Checkpoint目录的设置：如果程序使用到checkpoint目录，就必须配置一个hdfs兼容的文件系统作为ch
分类：
其他好文 时间：
2019-01-08 10:52:20
阅读次数：
177
有两个表 这是ucbi表 这是cai表 SELECT ucbi.Userid, ucbi.Carid, ucbi.rechargetime, ucbi.DatetimeFROM usercaridbindinfo ucbiLEFT JOIN carauthinfo cai ON cai.Receiv ...
分类：
其他好文 时间：
2019-01-05 15:20:29
阅读次数：
207
最近在写PowerShell脚本，把一些日常task给automation，写到创建CitrixDesktopGroup的部分，createdesktopgroup没什么问题，就用New-BrokerDesktopGroup就可以，但是在查询create出来的结果时，对参数MinimumFunctionalLevel不是很理解。如下new一个desktopgroup，后面跟相应的参数：PSC:\U
分类：
其他好文 时间：
2019-01-02 15:14:38
阅读次数：
222
简介 ESXi与Citrix 的XenServer 相似，它是一款可以独立安装和运行在祼机上的系统，因此与其他我们以往见过的VMware Workstation 软件不同的是它不再依存于宿主操作系统之上。在ESXi安装好以后，我们可以通过vSphere Client 远程连接控制，在ESXi 服务器 ...
分类：
系统相关 时间：
2019-01-02 12:55:16
阅读次数：
216
最近复习服务计算相关课程，讲到SOAP Header属性里的mustUnderstand属性。这里简单的说一下我对mustUnderstand的理解。 在soap中，header是可选项，header由header blocks（header entities）组成。其实header项是可选的，并不 ...
分类：
其他好文 时间：
2018-12-29 23:15:54
阅读次数：
330
Django中提供了"信号调度"，用于在框架执行操作时解耦。 通俗来讲，就是在某些动作发生时，信号允许特定的发送者去提醒一些接受者。 Django内置信号： 对于Django内置的信号，仅需注册指定信号，当程序执行相应操作时，会自动触发注册的函数。 注册信号，将如下内容写入与project同名的文件 ...
分类：
其他好文 时间：
2018-12-25 21:10:32
阅读次数：
125
XENSERVER虚拟机因为拆下物理显卡导致无法启动。场景：DELLR710服务器原来有一块AMD2270显卡，显卡详情请看：https://item.taobao.com/item.htm?spm=a1z10.3-c.w4002-14550985159.95.92076d77L5FOW1&id=552364743946，在上面安装了3台虚拟机，分别是CITRIX的DeliveryCont
分类：
移动开发 时间：
2018-12-21 16:58:51
阅读次数：
233
一、广播机制简介 Android提供了一套完整的API，允许应用程序自由的发送和接受广播，发送广播借助于我们之前学过的：Intent，而接收广播需要借助于广播接收器（Broadcast Receiver） 广播的类型主要分为两种：标准广播和有序广播。 标准广播：一种完全异步执行的广播，在广播发出之后 ...
分类：
移动开发 时间：
2018-12-11 16:02:33
阅读次数：
353
Android四大组件之一广播，使用的也比较多，广播可大致分为两种，一种是Android系统区域的广播，是由系统指令发出，例如：点亮屏幕广播，开机过程中的一些广播 省略…, 然而还有一种广播就是我们自己定义，自己来控制发出的广播，以下就简单介绍以下，在代码中发送广播和接收广播： 第一步，在onCre ...
分类：
移动开发 时间：
2018-12-08 17:08:56
阅读次数：
221
