本文将从以下两个方面去尝试讲解Kafka的设计理念,主要参考文献在这里: Kafka设计背景及原因 Kafka的设计特色 Kafka设计背景及原因 Kafka最初被LinkedIn设计来处理活动流数据(activity stream data)和系统处理数...
分类:
其他好文 时间:
2014-08-08 16:36:56
阅读次数:
237
Apache kafka性能优化架构分析,分析了那些因素会影响kafka性能。kafka内部实现做了哪些优化和处理。...
分类:
其他好文 时间:
2014-08-08 16:06:46
阅读次数:
298
什么时间使用高级应用? 针对一个消息读取多次 在一个process中,仅仅处理一个topic中的一组partitions 使用事务,确保每个消息只被处理一次 使用高级应用(调用较底层函数)的缺点? ????SimpleConsumer需要...
分类:
编程语言 时间:
2014-08-08 13:01:46
阅读次数:
340
extensionArray{
funcfoldLeft(a:T,action:(T,T)->T)->T{
varret:T=a
forb:Tinself{
ret=action(ret,b)
}
returnret
}
}把这个放到项目当中任何一个swift文件当中,即可全局访问。示例:求最小值vart=[1,3,5,4,9,100,6,-2]
letb=t.foldLeft(t[0],action:{a,binifa<b{r..
分类:
其他好文 时间:
2014-08-08 09:45:16
阅读次数:
223
下面是一个依赖管理语句(sbt)libraryDependencies ++= Seq(javaJdbc, javaEbean)这里的javaJdbc javaEbean出自下面所示的地方:playframework/framework/src/sbt-plugin/src/main/scala/P...
分类:
其他好文 时间:
2014-08-08 04:18:15
阅读次数:
262
Scala函数默认使用最后一个语句的运行结果作为返回值。例如def distance(a:Int,b:Int):Int={ a*a+b*b}以a*a+b*b的运行结果作为返回值。这种返回值的方式渊源于其他函数式语言Lisp/Haskell等(个人猜测)。在近期工作中,我写了如下的代码:def br....
分类:
其他好文 时间:
2014-08-07 13:01:20
阅读次数:
270
是O'Reilly公司今年(2014)7月发布的一本薄薄的小册子,151页,介绍了函数式编程的基本概念.全书使用代码范例都是基于JVM的编程语言,比如Java,Groovy,Scala.为了能够讲解所有的知识点,作者不得不在多个语言之间做切换,其实使用Erlang,Elixir甚至是C#做范例都不....
分类:
其他好文 时间:
2014-08-06 18:31:01
阅读次数:
295
由于项目需要,最近对storm进行了预研,安装与使用方式网上有很多示例,在此记录一下,备忘。 一、storm简介 ????Storm的术语包括Stream、Spout、Bolt、Task、Worker、Stream Grouping和Topology。S...
分类:
其他好文 时间:
2014-08-06 12:04:11
阅读次数:
409
1 背景 最近由于项目需要,需要使用kafka的producer。但是对于c++,kafka官方并没有很好的支持。 在kafka官网上可以找到0.8.x的客户端。可以使用的客户端有C版本客户端,此客户端虽然目前看来还较为活跃,但是代码问题还是较多的,而且对于c++的支持并不是很好。 还有c++版本,...
分类:
其他好文 时间:
2014-08-06 01:42:30
阅读次数:
407
推荐Coursera上的响应式编程课程,这个课程是scala语言的进阶课程。课程的开始提出了这样一个应用场景:构建Json串,不知道Json的同学随便google一下。为了做到这些事情,我们定义了下面的一些类abstract class JSON case class JSeq(elems: Lis...
分类:
其他好文 时间:
2014-08-05 18:55:09
阅读次数:
236