前提：安装好jdk1.7，hadoop安装步骤：1、安装scala下载地址：http://www.scala-lang.org/download/配置环境变量：export SCALA_HOME=/..../scalaexport PATH=.:$SCALA_HOME/bin ....验证：sca....
分类：
其他好文 时间：
2014-06-28 14:08:09
阅读次数：
404
Manifest和TypeTag是要解决什么问题？As with other JVM languages, Scala’s types are erased at compile time. This means that if you were to inspect the runtime typ...
分类：
其他好文 时间：
2014-06-24 12:49:07
阅读次数：
187
//依赖组件[模块]导入
var express = require('express');
var path = require('path');
var favicon = require('static-favicon');
var logger = require('morgan');
var cookieParser = require('cookie-parser');
var bodyParser = require('body-parser');
var log = require('./...
分类：
微信 时间：
2014-06-22 21:39:42
阅读次数：
401
欢迎关注我的新博客地址：http://cuipengfei.me/
在Scala中，名字叫做update的方法是有特殊作用的。
比如：
1
2
3
val scores = new scala.collection.mutable.HashMap[String, Int]
scores("Bob") = 100
val bobsScore =...
分类：
其他好文 时间：
2014-06-22 07:37:52
阅读次数：
282
spark1.0.0下使用scala实现机器学习算法，包括分类、回归、聚类、协同过滤以及降维等。
分类：
其他好文 时间：
2014-06-18 15:25:15
阅读次数：
346
本文分析了Spark1.0.0的Client，Master和Worker之间是如何通信的。通过对通信的分析，可以清楚的理解各个角色的作用和责任，和它在集群中扮演的不同角色。
当然了，为了便于源码分析，本文开始分析了akka，一个非常优秀的actor的实现：高性能，易于编程，可扩展和弹性无中心。...
分类：
其他好文 时间：
2014-06-18 06:59:54
阅读次数：
183
关键词: nutch今日来看看Nutch怎么Parse页面的： Nutch运用了两种Html parser东西（NekoHTML和TagSoup）来完成html的获取，这两种东西是可经过配置来选择的。 当然你要自己完成Parser你还能够选择HTMLParser[根据visitor访问者形式一起也供...
分类：
其他好文 时间：
2014-06-17 21:22:32
阅读次数：
258
1. Install Java and set JAVA_HOME2. Install IntelliJ IDH and Scala plugin3. Download spark1.0.04. Generate a workspace for IDEA[shaochen@linux spark-1...
分类：
其他好文 时间：
2014-06-17 19:55:22
阅读次数：
262
关键词:nutch今日来看看Nutch怎么Parse页面的：Nutch运用了两种Htmlparser东西（NekoHTML和TagSoup）来完成html的获取，这两种东西是可经过配置来选择的。当然你要自己完成Parser你还能够选择HTMLParser[根据visitor访问者形式一起也供给了Eventdriver的接口]来获取页面。假如..
分类：
其他好文 时间：
2014-06-17 18:30:27
阅读次数：
200
Scala是一种函数式语言和面向对象语言结合的新语言，本笔记中就零散记下学习scala的一些心得，主要侧重函数式编程方面。##1. 以递归为核心控制结构。实现循环处理的方式有三种：goto，for/while，递归，其中用goto实现循环已经在现代语言中被放弃，而for/while形式的结构化编程成...
分类：
其他好文 时间：
2014-06-17 16:01:37
阅读次数：
163
