在流数据的处理过程中，为了保证处理结果的可信度(不能多算，也不能漏算)，需要做到对所有的输入数据有且仅有一次处理。在Spark
Streaming的处理机制中，不能多算，比较容易理解。那么它又是如何作到即使数据处理结点被重启，在重启之后这些数据也会被再次处理呢？
分类：
其他好文 时间：
2014-05-06 00:58:21
阅读次数：
465
从WordCount开始分析
编写一个例子程序
编写一个从HDFS中读取并计算wordcount的例子程序:
packageorg.apache.spark.examples
importorg.apache.spark.SparkContext
importorg.apache.spark.SparkContext._
objectWordCount{
defm...
分类：
其他好文 时间：
2014-05-05 13:10:34
阅读次数：
463
1、基础的命令ver或cmd：查看当前系统版本md/rd
hack：创建/删除目录dir：列文件more 文件：使用管道查看文件net start/stop 服务名：启动/关闭服务net stop
sharedaccess：关闭防火墙netstat -an：查看开发端口netstat -anb：查看...
最近都是ARC写代码，弄了一下午整理了一下MRC的使用，原创哦！~！~~1
任何继承NSObject的对象，都需要管理内存2 基本数据类型放到栈中，对象放到堆空间中3 oc对象 nil指针 release 不报错4 僵尸对象检测
stop右-》Edit Scheme-》Diagncatics-》 ....
分类：
其他好文 时间：
2014-05-04 10:44:48
阅读次数：
434
JXL组件生成报表
1、具体报错如下：
usage: java org.apache.catalina.startup.Catalina [ -config {pathname} ] [ -nonaming ] { -help | start | stop }
2014-5-3 23:10:18 org.apache.catalina.core.AprLifecycleListene...
分类：
其他好文 时间：
2014-05-04 08:55:35
阅读次数：
376
If you have installed YouTrack from EXE
Distribution, then the best way to change the database location is by specifying
it via JVM property.Stop curr...
分类：
数据库 时间：
2014-05-03 23:30:08
阅读次数：
505
JXL组件生成报表
1、具体报错如下
usage: java org.apache.catalina.startup.Catalina [ -config {pathname} ] [ -nonaming ] { -help | start | stop }
2014-5-3 17:14:13 org.apache.catalina.core.AprLifecycleListener...
分类：
其他好文 时间：
2014-05-03 21:58:03
阅读次数：
392
RDD的依赖关系
Rdd之间的依赖关系通过rdd中的getDependencies来进行表示，
在提交job后，会通过在DAGShuduler.submitStage-->getMissingParentStages
privatedefgetMissingParentStages(stage:
Stage): List[Stage] = {
valmissing
=newHash...
分类：
其他好文 时间：
2014-05-03 15:56:22
阅读次数：
282
1、具体错误如下
usage: java org.apache.catalina.startup.Catalina [ -config {pathname} ] [ -nonaming ] { -help | start | stop }
2014-5-1 23:17:23 org.apache.catalina.core.AprLifecycleListener init
信息: Loade...
分类：
其他好文 时间：
2014-05-02 05:12:30
阅读次数：
257
1、具体报错如下
usage: java org.apache.catalina.startup.Catalina [ -config {pathname} ] [ -nonaming ] { -help | start | stop }
2014-5-1 23:10:21 org.apache.catalina.core.AprLifecycleListener init
信息: Loade...
分类：
其他好文 时间：
2014-05-02 02:17:00
阅读次数：
353
