搜索关键字：spark-文本分词，搜索到1个结果！码迷,mamicode.com！

目前的分词器大部分都是单机服务器进行分词，或者使用hadoop mapreduce对存储在hdfs中大量的数据文本进行分词。由于mapreduce的速度较慢，相对spark来说代码书写较繁琐。本文使用spark + ansj对存储在hdfs中的中文文本数据进行分词。...

分类：其他好文时间：2015-05-14 16:43:27 阅读次数：350

共1条

分享档案

更多>