码迷,mamicode.com
首页 >  
搜索关键字:spark 大数据 hadoop spark-sql    ( 29965个结果
闲扯大数据
转自:闲扯大数据“大数据”这个概念最近被人扯的有点烂了,一刹那间似乎人人都在说数据,但真正能说明白的没有几颗,今天我们也闲扯一下“大数据”。先讲几个故事:1、上周我在上海出差的时候,一个老同学火急火燎的找我问:“马应龙的眼霜在淘宝上销量怎么样?评价好不好?我打算买点他家的股票……” 我上@淘宝指数 ...
分类:其他好文   时间:2014-07-09 23:04:33    阅读次数:219
Speculative Execution in Hadoop
来自:http://blog.csdn.net/macyang/article/details/7880671所谓的推测执行,就是当所有task都开始运行之后,Job Tracker会统计所有任务的平均进度,如果某个task所在的task node机器配置比较低或者CPU load很高(原因很多),...
分类:其他好文   时间:2014-07-09 21:05:18    阅读次数:248
《数据挖掘:R语言实战》
《数据挖掘:R语言实战》基本信息作者: 黄文 王正林丛书名: 大数据时代的R语言出版社:电子工业出版社ISBN:9787121231223上架时间:2014-6-6出版日期:2014 年6月开本:16开页码:292版次:1-1所属分类:计算机 > 软件与程序设计 > 综合 > 高级程序语言设计更多关...
分类:其他好文   时间:2014-07-09 20:38:14    阅读次数:308
Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询
1、搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar、hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包2、主要程序Java代码packagec...
分类:编程语言   时间:2014-07-09 00:42:53    阅读次数:384
在Ubuntu下配置运行Hadoop2.4.0单节点配置
还没有修改hosts,请先按前文修改。 还没安装java的,请按照前文配置。 (1)增加用户并设立公钥: sudo addgroup hadoop sudo adduser --ingroup hadoop hduser su - hduser cat $HOME/.ssh/id_rsa.pub >...
分类:其他好文   时间:2014-07-08 22:57:08    阅读次数:329
_00018 Hadoop-2.2.0 + Hbase-0.96.2 + Hive-0.13.1 分布式环境整合,Hadoop-2.X使用HA方式
# Hadoop-2.2.0+Hbase-0.96.2+Hive-0.13.1分布式环境整合,超详细哦 # 学习前言 一些基本的东西就不说了,前面已经说过,比如ssh免密码登录,时间同步等,如果不清楚的话请上面看Hadoop-1.x,或者Hadoop-2.X的搭建,那里面很详细。 本来这个早该整理完了,但是这段时间有点小忙,都没有时间去弄,不过今天终于把这个整理完了,以此来帮助那些想学这些新技术的朋友们,虽然整理的时候有点累,但是还是值得的。对云计算有兴趣的朋友可以加上面说的214293307这个群哦,一...
分类:其他好文   时间:2014-07-08 19:25:04    阅读次数:702
大数据导出报错
1、错误描述 java.lang.IllegalArgumentException:Can not find a java.io.InputStream  with the name [inputStream] in the invocation stack. Check the tag specified for this action 2、错误原因 3、解决办法...
分类:其他好文   时间:2014-07-08 18:33:04    阅读次数:237
Nuch分析一
1、构建Nutch tar -zxvf apache-nutch-2.2.1-src.tar.gz  cd apache-nutch-2.2.1 ant runtime 2、    ant构建之后,生成runtime文件夹,该文件夹下面有deploy和local文件夹,分别代表了nutch的两种运行方式: Deploy:的数据必须运行在Hadoop的HDFS中 loca...
分类:其他好文   时间:2014-07-08 18:20:36    阅读次数:268
Hadoop笔记(一)
Hadoop笔记(一) 安装配置详解...
分类:其他好文   时间:2014-07-08 17:32:49    阅读次数:138
Ubuntu拼音输入法安装的问题
最近在电脑上安装来双系统,其实安到就是一个Wubi版的软件,直接把现有到内存虚拟出来一片空间来承载这个Ubuntu系统,直接在网上搜Wubi版到Ubuntu,然后最好是断网安装,否则他会自动的更新,那样会很慢的,要学习hadoop,那么一个Linux系统还是必须要有的,简单到命令行操作还..
分类:其他好文   时间:2014-07-08 09:54:48    阅读次数:217
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!