Apache Spark MLlib是Apache Spark体系中重要的一块拼图:提供了机器学习的模块。不过,目前对此网上介绍的文章不是很多。拿KMeans来说,网上有些文章提供了一些示例程序,而这些程序基本和Apache Spark 官网上的程序片断类似:在得到训练模型后,几乎都没有展示如何使用该模型、程序执行流程、结果展示以及举例测试数据等部分。笔者根据Apache Spark官网上的程序片断,写了一个完整的调用MLlib KMeans库的测试程序,并成功在Spark 1.0 + Yarn 2.2 的...
分类:
其他好文 时间:
2014-07-28 00:01:39
阅读次数:
343
Spark SQL 中Catalyst的核心优化器Optimizer源码剖析...
分类:
数据库 时间:
2014-07-26 02:17:36
阅读次数:
390
Tigase是一种XMPP服务器,可以作为采用XMPP协议的各种IM(Instant Messeging)工具(如Pandion、Spark等)的服务器。在Linux环境下安装Tigase的步骤如下:(1)下载安装文件到https://projects.tigase.org/projects/tig...
分类:
系统相关 时间:
2014-07-25 18:58:52
阅读次数:
733
ubuntu14 手动安装sbt 参见官网配置说明http://www.scala-sbt.org/release/tutorial/Manual-Installation.html 1、下载sbt通用平台压缩包:sbt-0.13.5.tgzhttp://www.scala-sbt.org/down...
分类:
系统相关 时间:
2014-07-25 16:43:51
阅读次数:
1010
ubuntu14 安装scala详细教程 1、下载scala压缩包http://www.scala-lang.org/download/ 2、建立目录,解压文件到所建立目录$ sudo mkdir /opt/scala$ sudo tar zxvf scala-2.11.2.tgz -C /op.....
分类:
其他好文 时间:
2014-07-25 13:49:51
阅读次数:
233
见明知意的文件名,还用我来介绍??可以说我闲的蛋疼,反正我已经做了记录了,哈哈 ? sbin目录下的脚本文件 slaves.sh???????????????在所有定义在${SPARK_CONF_DIR}/slaves的机器上执行一个...
分类:
其他好文 时间:
2014-07-25 00:07:34
阅读次数:
241
Spark SQL Catalyst的核心类库TreeNode详解,配有实例,图文并茂。...
分类:
数据库 时间:
2014-07-24 23:37:23
阅读次数:
895
* Flex开发中可用两种语言1.MXML2.ActionScript* Flex中使用两个组件集1.MX (mx.*) 早期的Flex版本用到的组件集2.Spark (spark.*) Flex4及以后的版本用到的组件集。Spark比MX组件有更多皮肤外观及其它方面的优点。它们有相同的组件(如按钮...
分类:
其他好文 时间:
2014-07-24 22:02:42
阅读次数:
292
看惯了JAVA的语法,再看scala的语法,有的晦涩难懂。正好遇到一个介绍scala语法的文章,就直接截图留念。省的再临时抱佛脚了。
分类:
其他好文 时间:
2014-07-24 21:21:47
阅读次数:
511