1 应用背景: 需要实时统计用户的登陆数,在线人数,活跃时间,下载等指标的数据,或者清洗后移到hdfs上。
2 设计架构:
1) 客户端产生数据---
2) kafka-生产者实时采集数据(保留7天)-----
3) storm实时消费数据,处理数据
4)把实时数据统计结果缓存到memcached 中...
分类:
其他好文 时间:
2014-12-29 23:01:45
阅读次数:
235
刚接触Ruby,发现Ruby真心强大,搞了那么久的Java了,已经被Java的繁琐的语法整的无语透顶了,尤其的Java异常,设计出来就是个失败呀!Ruby目前更新到了2.x了,社区也很活跃,开发效率和Java相比不是搞了一个级别。 先从感性上对比一下Ruby和Java的编码效率,Java真是弱到爆....
分类:
其他好文 时间:
2014-12-28 22:13:49
阅读次数:
204
这篇文章,源于中午在我建立的一个产品经理微信群的讨论,正好身边有一大波程序员,于是请教他们,程序员,究竟经常去哪些网站。于是,有了这篇文章,感谢程序员志伟、俊坤、国晴、超凡的分享。看看你去过哪几个……也欢迎大家补充更多有价值的网站。一、github.com开源代码(代码活跃社区)二、code.goo...
分类:
Web程序 时间:
2014-12-28 20:50:26
阅读次数:
171
源地址:http://nshipster.cn/afnetworking-2/AFNetworking是当前 iOS 和 OS X 开发中最广泛使用的开源项目之一。它帮助了成千上万叫好又叫座的应用,也为其它出色的开源库提供了基础。这个项目是社区里最活跃、最有影响力的项目之一,拥有 8700 个 st...
分类:
移动开发 时间:
2014-12-28 09:15:36
阅读次数:
329
1.确保数据库已经打开审计
SQL> show parameter audit
NAME TYPE VALUE
------------------------------------ ---------------------- -----------------------------...
分类:
其他好文 时间:
2014-12-26 13:03:52
阅读次数:
190
如何为session设置超时时间?
要为session设置超时时间,首先要清楚怎么样算是超时,
超时时间是session自上一次活跃时间到本次开始活跃时间之间的间隔时间大于设置的session超时时间.
为session设置超时时间常用的方法有三种:
第一种方法:
HttpSession session = request.getSession(true);
sessi...
分类:
其他好文 时间:
2014-12-25 14:35:45
阅读次数:
144
Spark是当今大数据领域最活跃最热门的高效的大数据通用计算平台,基于RDD,Spark成功的构建起了一体化、多元化的大数据处理体系,在“One Stack to rule them all”思想的引领下,Spark成功的使用Spark SQL、Spark Streaming、MLLib、Graph...
分类:
其他好文 时间:
2014-12-24 23:59:13
阅读次数:
358
Spark是当今大数据领域最活跃最热门的高效的大数据通用计算平台,基于RDD,Spark成功的构建起了一体化、多元化的大数据处理体系,在“One Stack to rule them all”思想的引领下,Spark成功的使用Spark SQL、Spark Streaming、MLLib、Graph...
分类:
其他好文 时间:
2014-12-24 23:55:35
阅读次数:
195
Spark是当今大数据领域最活跃最热门的高效的大数据通用计算平台,基于RDD,Spark成功的构建起了一体化、多元化的大数据处理体系,在“OneStacktorulethemall”思想的引领下,Spark成功的使用SparkSQL、SparkStreaming、MLLib、GraphX近乎完美的解...
分类:
其他好文 时间:
2014-12-23 06:41:54
阅读次数:
192
Spark是当今大数据领域最活跃最热门的高效的大数据通用计算平台,基于RDD,Spark成功的构建起了一体化、多元化的大数据处理体系,在“OneStacktorulethemall”思想的引领下,Spark成功的使用SparkSQL、SparkStreaming、MLLib、GraphX近乎完美的解...
分类:
其他好文 时间:
2014-12-23 06:39:55
阅读次数:
217