Ubuntu14.04下Scala开发环境搭建。1:安装JDK,jdk-6u45-linux-x64.bin 将其安装到/usr/lib/jvm/jdk1.6.0_45/。2:安装Scala,下载scala-2.11.4.tgz 将其解压到/usr/lib/jvm/scala-2.11.4/。3:配...
分类:
其他好文 时间:
2014-11-14 19:20:52
阅读次数:
192
一. Kafka中的相关概念的介绍
Kafka是一个scala实现的分布式消息中间件,其中涉及到的相关概念如下:
Kafka中传递的内容称为message(消息),message 是通过topic(话题)进行分组的 topic 和message 的关系是一对多的关系我们称发布message的进程为producer ,就是说producer生成message>对然...
分类:
其他好文 时间:
2014-11-13 22:37:11
阅读次数:
353
1.SparkSpark是继Hadoop之后,另外一种开源的高效大数据处理引擎,目前已提交为apach顶级项目。效率:据官方网站介绍,Spark是Hadoop运行效率的10-100倍(随内存计算、磁盘计算的不同而不同)。语言:支持的语言包括java、scala、python等,此外还支持SQL查询。...
分类:
其他好文 时间:
2014-11-13 20:40:19
阅读次数:
129
在安装Scala的时候遇到以下错:Exception in thread "main" java.lang.NoClassDefFoundError: scala.tools.nsc.MainGenericRunner at gnu.java.lang.MainThread.run(libgcj.s...
分类:
其他好文 时间:
2014-11-13 20:30:07
阅读次数:
182
下划线_ underscore横线- minus;hyphen以及手机键盘上的井号键# number sign,英语国家是hash,美语是pound,星号键* asterisk,star(美语),数学公式中作multiply感叹号! exclamation mark冒号: colon双引号“” do...
分类:
其他好文 时间:
2014-11-13 16:18:41
阅读次数:
136
大数据“火”的有段日子了,原来打算学习hadoop……后知道spark要比hadoop更牛,故而转学spark。其原码为scala所写,为了更好的研究spark,故又开始学习scala.将自己所学记录在此,不为点赞,只为加深记忆,加深理解…不是都说写一遍等于读十遍嘛……1、基本类型: Byte...
分类:
其他好文 时间:
2014-11-12 22:40:41
阅读次数:
257
目前,SPARK在大数据处理领域十分流行。尤其是对于大规模数据集上的机器学习算法,SPARK更具有优势。一下初步介绍SPARK在linux中的部署与使用,以及其中聚类算法的实现。...
分类:
编程语言 时间:
2014-11-12 21:21:04
阅读次数:
264
??
更换内核版本
原来digilent的内核版本是linux-3.3-digilent更改为3.3.0-xillinux-1.0-rich+
参考:http://xillybus.com/xillinux-rich-kernel
错误提示:DISAGREES ABOUT VERSION OF SYMBOL MODULE_LAYOUT,解决方法
问题描述参见:http://www.ibm...
分类:
数据库 时间:
2014-11-12 21:17:56
阅读次数:
188
当用NDK编译的库在运行加载时报如下错:
dlopen("/data/data/xxx.xxx.xxx/lib/libxxx.so")
failed: dlopen failed: cannot locate symbol "__exidx_end" referenced by "libxxx.so"...
解决办法如下:
在你报错的库libxxx.so的编译脚本Android.mk请加...
分类:
其他好文 时间:
2014-11-12 11:53:22
阅读次数:
1450
在Linux上编译Qt的时候configure出来的Makefile传递给g++的参数visiblility=hidden,然后就会调用Qt库所使用的第三方库libpng库源代码函数声明添加上__attribute__ ((visibility("hidden"))),这个函数我这里是png_set...
分类:
其他好文 时间:
2014-11-11 18:47:31
阅读次数:
144