1.瀑布模型： 项目计划->需求分析->软件设计->程序开发->软件测试->集成维护 优点：①强调需求、计划的作用②前一阶段完成后，只需要关注后续阶段③为项目提供按阶段划分的检查点，里程碑清晰④文档规范 缺点：①难以适应需求频繁变化②强制的里程碑、完成时间点③项目周期后段才能看到结果④文档工作量大 ...
分类：
其他好文 时间：
2020-03-14 23:48:31
阅读次数：
67
1，栈溢出问题，主要原因：每个RDD会存储他的祖先，以便发生错误的时候，能够利用这种关系再次生成。算法类的spark程序，因为会迭代很多次，这种关系会变得很巨大，引发栈溢出问题 * 设置检查点 val sc = new SparkContext(conf) sc.setCheckpointDir(" ...
分类：
编程语言 时间：
2020-02-28 18:55:18
阅读次数：
60
基础配置 高可用部分 容错和检查点配置 Flink集群安全配置 Zookeeper安全配置 ...
分类：
其他好文 时间：
2020-02-22 09:49:40
阅读次数：
142
At most Onece：最多一次，如果算子处理事件失败，事件将不再尝试该事件。 At Least Onece：至少一次，如果算子处理事件失败，算子会再次尝试该处理事件，直到有一次成功。 Exactly Once：严格一次，通常有两种方法实现： 1.分布式快照+状态检查点，思想就是对比检查点和分布 ...
分类：
其他好文 时间：
2020-02-21 14:26:40
阅读次数：
71
RDD通过persist方法或cache方法可以将前面的计算结果缓存，默认情况下 persist() 会把数据以序列化的形式缓存在 JVM 的堆空间中。 但是并不是这两个方法被调用时立即缓存，而是触发后面的action时，该RDD的计算结果将会被缓存在计算节点的内存中，并供后面重用。 示例如下： d ...
分类：
其他好文 时间：
2020-02-20 18:41:28
阅读次数：
74
背景 unittest支持各种断言方法。 断言列表 官方文档 方法检查点 assertEqual(a, b) a == b assertNotEqual(a, b) a != b assertTrue(x) bool(x) is True assertFalse(x) bool(x) is Fals ...
分类：
其他好文 时间：
2020-02-10 13:26:17
阅读次数：
309
说检查点,其实就是对过去历史的记录，可以认为是log.不过这里进行了简化.举例来说,我现在又一段文本.文本里放有一堆堆的链接地址.我现在的任务是下载那些地址中的内容.另外因为网络的问题或者网站的问题,每次下载可能不会非常的成功.有可能出现断链或者socket异常错误。不过不管产生什么样的错误，我都希... ...
分类：
编程语言 时间：
2020-02-09 09:56:32
阅读次数：
128
断言（检查点）：即请求运行之后，增加一个检查判断，用来检查判断这个请求是否运行成功，以及结果是否和预期的一样 ...
分类：
其他好文 时间：
2020-02-06 16:37:33
阅读次数：
91
在前面上一章的基础上： 创建测试用例Test case，选择测试套件“用例集合”右键点击“New TestCase”，如下图所示： 创建好之后，新建的TestCase中包含三个部分： 测试步骤：Test Steos 负载测试：Load Tests 安全测试：Security Tests 把请求添加到 ...
分类：
其他好文 时间：
2020-02-05 23:22:35
阅读次数：
150
1. 检查点 2. 用户界面要素规则 01.文字编辑框控件 输入文本框数据 02.列表选择框控件 03.增删改查等按钮控件 04.下拉列表控件 05.日期控件 规范名称 日期控件的时间只能够选择，不能够手工修改。规范步骤 日期控件设置的时间是通过特殊的JavaScript语句写出来的，保证了用户选择 ...
分类：
Web程序 时间：
2020-02-04 22:10:46
阅读次数：
115
