码迷,mamicode.com
首页 >  
搜索关键字:mahout lda hadoop cv    ( 16332个结果
用mapreduce实现将mysql数据导出到HDFS上
因为业务需要,需要将一批mysql数据导入到HBASE,现在先将数据从Mysql导出到HDFS。版本:hadoop CDH4.5,Hbase-0.946 1、实体类 YqBean 是我的实体类,请根据自己需要修改,实体类需要 implements Writable, DBWritable。 ...
分类:数据库   时间:2014-07-29 11:50:56    阅读次数:292
scala操作hbase案例
案例取自streaming-app项目package com.asiainfo.ocdc.streaming.toolsimport org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.conf.Configurati...
分类:其他好文   时间:2014-07-29 11:02:26    阅读次数:1081
程序员不能不知道的那些“第一”
摘要:上次小编介绍了三位计算机领域的大神:计算机之父艾伦·麦席森·图灵、Hadoop之父Doug Cutting和Amazon AWS推动者Werner Vogels,他们分别因为超凡的创造力、顶级的成功技术、扬名天下的项目而被我们熟知。今天小编接着聊一聊那些我们终其一生都无法超越的程序员,当然,今天的会有所不同哦。 世界上第一个程序员是个女士 1815年出生于伦敦的阿达·洛芙...
分类:其他好文   时间:2014-07-28 15:47:53    阅读次数:324
linux网络配置、环境变量以及JDK安装(CentOS 6.5)
由于需要搭建hadoop平台,但是苦于没有现成可用的linux服务器,只好自己下载了CentOS 6.5从头装起,安装过程中遇到了很多问题,比如网络配置、时钟同步、环境变量配置、以及各种服务的启停,还有jdk的安装等(虽然系统自带JDK,但是本人过于低端,自带的JDK的安装路径都搞不明白,就干脆.....
分类:系统相关   时间:2014-07-28 15:34:13    阅读次数:416
hadoop shell 操作复制
hadoop fs列出所有的命令hadoop fs -help ls列出某个命令的详细信息hadoop dfs -mkdir /data/weblogshadoop dfs -mkdir /data/dir1 /data/dir2 ...创建文件夹,可以递归创建,可同时创建多个目录echo "Hel...
分类:其他好文   时间:2014-07-28 15:08:23    阅读次数:224
Hadoop1.2.1分布式安装-2-安装篇
1、在打算做namenode的机器上,wget或其他方式下载hadoop的压缩包,并解压到本地指定目录 下载解压命令参考Linux常用命令。 2、配置namenode,修改site文件 修改core-site.xml <configuration> ??<property> ?...
分类:其他好文   时间:2014-07-28 00:48:29    阅读次数:214
HorizontalScrollView的使用示例
MainActivity如下: package cc.cv; import android.os.Bundle; import android.view.LayoutInflater; import android.view.View; import android.widget.ImageView; import android.widget.LinearLayout; import and...
分类:其他好文   时间:2014-07-28 00:06:39    阅读次数:248
学习hadoop
(1)为了操作方便,需获取root权限,否则每次sudo 然后输入密码,较为麻烦默认的root密码是随机的,设置新的root密码的方法: sudo passwd设置了新的密码后,su root 切换到root权限用户(2)haoop要求的是sun jdk, openjdk不可以
分类:其他好文   时间:2014-07-27 22:37:09    阅读次数:243
Hadoop学习笔记(5) ——编写HelloWorld(2)
Hadoop学习笔记(5) ——编写HelloWorld(2) 前面我们写了一个Hadoop程序,并让它跑起来了。但想想不对啊,Hadoop不是有两块功能么,DFS和MapReduce。没错,上一节我们写了一个MapReduce的HelloWorld程序,那这一节,我们就也学一学DFS程序的编写。....
分类:其他好文   时间:2014-07-27 22:24:49    阅读次数:280
Hadoop学习笔记(4) ——搭建开发环境及编写Hello World
Hadoop学习笔记(4) ——搭建开发环境及编写Hello World 整个Hadoop是基于Java开发的,所以要开发Hadoop相应的程序就得用JAVA。在linux下开发JAVA还数eclipse方便。 下载 进入官网:http://eclipse.org/downloads/。 找到相应....
分类:其他好文   时间:2014-07-27 10:35:02    阅读次数:209
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!