小弟不才,工作中也用到了大数据的相关东西,一开始接触的时候,是通过买来的教学视频入的门。这两天整理了一下自己的视频资料,供各位进行下载。
文档截图:...
分类:
其他好文 时间:
2015-06-03 13:42:05
阅读次数:
146
1. 问题 今天为storm程序添加了一个计算bolt,上线后正常,结果发现之前的另一个bolt在将中文插入到hbase中后查询出来乱码。其中字符串是以UTF-8编码的url加密串,然后我使用的URLDecoder.decode(str, "UTF-8")解码,最后插入到hbase中。2. 排查(....
分类:
其他好文 时间:
2015-06-03 13:10:56
阅读次数:
166
用DotSpatial.Topology进行的测试,即使有NetTopologySuite类库进行测试: 1 Polygon inputGeometry = null; 2 LineString analysisGeoemtry = null; 3 privat...
分类:
Web程序 时间:
2015-06-02 23:24:55
阅读次数:
180
Transactionalspouts Trident是以小批量(batch)的形式在处理tuple,并且每一批都会分配一个唯一的transaction id。不同spout的特性不同,一个transactionalspout会有如下这些特性: 1、有着同样txid的batch一定...
分类:
其他好文 时间:
2015-06-02 20:22:09
阅读次数:
121
Transactionalspouts
Trident是以小批量(batch)的形式在处理tuple,并且每一批都会分配一个唯一的transaction id。不同spout的特性不同,一个transactionalspout会有如下这些特性:
1、有着同样txid的batch一定是一样的。当重播一个txid对应的batch时,一定会重播和之前对应txid的batch中同样的tuple...
分类:
其他好文 时间:
2015-06-02 17:56:46
阅读次数:
102
你已经看到实现有且只有一次被执行的语义时的复杂性。Trident这样做的好处把所有容错想过的逻辑都放在了State里面--作为一个用户,你并不需要自己去处理复杂的txid,存储多余的信息到数据库中,或者是任何其他类似的事情。你只需要写如下这样简单的code:TridentTopologytopolo..
你已经看到实现有且只有一次被执行的语义时的复杂性。Trident这样做的好处把所有容错想过的逻辑都放在了State里面--作为一个用户,你并不需要自己去处理复杂的txid,存储多余的信息到数据库中,或者是任何其他类似的事情。你只需要写如下这样简单的code:TridentTopology topol...
What is HDInsight? Microsoft Azure HDInsight 是基于 Hortonoworks Data Platform (HDP) 的 Hadoop 集群,包括Storm, HBase, Pig, Hive, Sqoop, Oozie, Ambari等(具体的组件请参...
分类:
其他好文 时间:
2015-06-01 18:15:16
阅读次数:
201
你已经看到实现有且只有一次被执行的语义时的复杂性。Trident这样做的好处把所有容错想过的逻辑都放在了State里面 -- 作为一个用户,你并不需要自己去处理复杂的txid,存储多余的信息到数据库中,或者是任何其他类似的事情。你只需要写如下这样简单的code:
TridentTopology topology = new TridentTopology(); ...
win git error init_cheap:VirtualAlloc pointer is null, Win32 error 487标签(空格分隔): git在idea利用git进行代码更新时遇到的问题,google了一下,早StackOverflow找到解决办法,在此share一下Error messageE:\vipshop\storm-sql>git pull origin joeywen...
分类:
Windows程序 时间:
2015-05-29 20:25:33
阅读次数:
3227