在流数据的处理过程中，为了保证处理结果的可信度(不能多算，也不能漏算)，需要做到对所有的输入数据有且仅有一次处理。在Spark
Streaming的处理机制中，不能多算，比较容易理解。那么它又是如何作到即使数据处理结点被重启，在重启之后这些数据也会被再次处理呢？
分类：
其他好文 时间：
2014-05-06 00:58:21
阅读次数：
465
加群看见的但是计算好慢，谁有更优的算法，麻烦说一下。factor=[]for x in
xrange(1, 987654//2+1): if 987654%x==0: factor.append(x)sum=0for y in xrange(1,
1000000000): ...
分类：
编程语言 时间：
2014-05-06 00:37:50
阅读次数：
851
今天有一同学在群上聊到一个比较好玩的题目（本人看书不多，后面才知是《C++模板元编程》第二章里面的一道习题），
我也抱着试一试的态度去完成它， 这道题也体现了c++模板元编程的基础和精髓： 类型就是数据。题目如下所述：Write a ternary
metafunctionreplace_typet...
分类：
其他好文 时间：
2014-05-06 00:27:15
阅读次数：
333
那年是787年！公元？——Monty
Python任何规则都不可能如此一般，以至不能容许任何例外（异常）。——Bobert Burton1、模块化和界面
任何实际程序都是由一些部分组成的。例如，最简单的“ Hello, world! ”程序也涉及到至少两部分：用户代码要求将Hello, world....
分类：
其他好文 时间：
2014-05-06 00:19:04
阅读次数：
382
1. 熟知主流硬件体系（x86, x64）2. 熟知 CPython
的具体实现，如若可能至少通读源码三遍以上3. 熟知每条 Python bytecode 如何被解释执行4. 熟知每条 Python 语句如何 compile 成
bytecode5. 熟知 Python 主要数据结构所采用的优化手...
分类：
其他好文 时间：
2014-05-06 00:18:16
阅读次数：
306
在上一章中提到了编码压缩，讲了一个简单的DataBlockEncoding.PREFIX算法，它用的是前序编码压缩的算法，它搜索到时候，是全扫描的方式搜索的，如此一来，搜索效率实在是不敢恭维，所以在hbase当中单独拿了一个工程出来实现了Trie的数据结果，既达到了压缩编码的效果，亦达到了方便查询的...
分类：
其他好文 时间：
2014-05-05 23:30:15
阅读次数：
434
引言
LZ之前其实一直对python都很好奇，只是苦于平时没有时间去了解它，因此趁着51假期这个机会，便迫不及待的开始了自己的探索。作为一个标准的Java程序猿，在了解python的过程当中，LZ遇到了很多囧事，接下来LZ就一一给大家说道说道。本文纯属看个乐子，非python教学。囧事一：ecli....
分类：
编程语言 时间：
2014-05-05 23:02:42
阅读次数：
356
最近看tomcat源码，这类接口多的有点眩，整理出来看一下。（基于tomcat4）javax.servlet.ServletRequset接口，和org.apache.catalina.Request接口，有什么联系？其实就是对Request不同层面上的定义。一、首先看下javax.servlet....
分类：
其他好文 时间：
2014-05-05 22:53:53
阅读次数：
457
1. introductionfrom numpy import
*random.rand(4,4)#array to matrixrandMat=mat(randon.rand(4,4))#matrix
inverseIvrandMat=randMat.I#indentity matrixeye(...
分类：
编程语言 时间：
2014-05-05 22:24:10
阅读次数：
336
列表推导式（list
comprehension）是利用其他列表创建新列表（类似于数学术语中的集合推导式）的一种方法。它的工作方式类似于for循环，也很简单：In [39]:
[x*x for x in range(10)]Out[39]: [0, 1, 4, 9, 16, 25, 36, 49, ...
分类：
编程语言 时间：
2014-05-05 22:21:48
阅读次数：
422
