来自: https://community.qingcloud.com/topic/344/spark-streaming使用kafka保证数据零丢失 spark streaming从1.2开始提供了数据的零丢失,想享受这个特性,需要满足如下条件: 数据输入需要可靠的sources和可靠的recei ...
分类:
其他好文 时间:
2016-09-29 21:17:05
阅读次数:
120
本課主題 生成器介紹和操作实战 迭代器介紹和操作实战 序例化和反序例化 Json 和 Pickle 操作实战 字符串格式化的应用 本周作业 生成器介紹和操作实战 什么是生成器,生成器是一个对象,它具有生成指定条件数据成力的一个对象,它不会生成,当只有循还它的时候才会生成,在Python2.7 有一个 ...
分类:
编程语言 时间:
2016-09-10 10:14:07
阅读次数:
368
mysql会对sql语句做优化, in 后面的条件不超过一定数量仍然会使用索引。mysql 会根据索引长度和in后面条件数量判断是否使用索引。另外,如果是in后面是子查询,则不会使用索引。一个文章库,里面有两个表:category和article。category里面有10条分类数据。article ...
分类:
数据库 时间:
2016-08-18 14:10:51
阅读次数:
311
1.变量与常量区别: 2.变量空间的开辟条件:数据类型 + 变量名称 = 初始化值。 3.变量的作用域和生存期:从其定义的位置开始,到该变量所在的那对大括号结束,生存周期:离开作用范围就消失在内存中。 ...
分类:
编程语言 时间:
2016-07-24 17:56:45
阅读次数:
216
1、IP数据报格式2、MTUMTU(最大传输单元):帧格式中的数据字段的最大长度。3、分片1)分片的条件数据报长度超过网络所允许的最大传输单元MTU时,必须把过长的数据报进行分片后才能在网络上传输。2)如何分片对于发送端发送的每份IP数据报来说,其标识字段都包含一个唯一值。..
分类:
其他好文 时间:
2016-07-23 21:40:20
阅读次数:
285
1、IP数据报格式2、MTUMTU(最大传输单元):帧格式中的数据字段的最大长度。3、分片1)分片的条件数据报长度超过网络所允许的最大传输单元MTU时,必须把过长的数据报进行分片后才能在网络上传输。2)如何分片对于发送端发送的每份IP数据报来说,其标识字段都包含一个唯一值。..
分类:
其他好文 时间:
2016-07-23 21:32:26
阅读次数:
239
mybatis 是持久层中的一种框架 用于管理SQL语句与数据库交互。 它是友友半自动的运行机制 需要自己来写SQL语句 是一种比较灵活 的框架 它将SQL语句与代码分离了 写在配置文件中 提高了可修改性 主要操作是为借口类配置相应的XML实现文档 最具特点是缓存机制 满足缓存的条件 1 数据量小 ...
分类:
其他好文 时间:
2016-07-20 01:17:43
阅读次数:
174
首先我按着我的理解说一下它为什么是卡特兰数,首先卡特兰数有一个很典型的应用就是求1~N个自然数出栈情况的种类数。而这里正好就对应了这种情况。我们要满足题目中给的条件,数字应该是从小到大放置的,1肯定在左上角,所以1入栈,这时候我们放2,如果我们把2放在了1的下面就代表了1出栈,把2放在上面就代表了2 ...
分类:
其他好文 时间:
2016-06-09 14:45:05
阅读次数:
209
1.针对数据库查询问题的方便,可以建立重要表的log备份记录表,在主表的添加,修改,删除添加触发器,修改触发器增加触发字段的点,限制条件。 数据库log表查问题比从线上多台服务器上下载日志文件相对方便,但是两者的侧重点不同。 2.错误代码: 1118 Row size too large. The ...
分类:
数据库 时间:
2016-05-28 23:18:35
阅读次数:
2239
一,介绍 ①什么是桶排序? 桶排序是在已经数据的范围的条件下,创建若干个桶,根据相应的比较规则将待排数据落入各个对应的桶中,最后扫描 桶 来实现排序。 ②桶排序需要的附加条件 数据的范围已知。 比如,输入整数数据 A(1) A(2)......A(n-1) A(n),它们都是由小于M的整数组成,此时 ...
分类:
编程语言 时间:
2016-05-27 16:18:50
阅读次数:
198