声明:1)本文由我bitpeach原创撰写,转载时请注明出处,侵权必究。
2)本小实验工作环境为Ubuntu操作系统,hadoop1-2-1,jdk1.8.0。
3)统计词频工作在单节点的伪分布上,至于真正实际集群的配置操作还没有达到,希望能够由本文抛砖引玉。(一)Hadoop的配置修正 网上有很多...
分类:
其他好文 时间:
2014-05-05 21:54:47
阅读次数:
456
在Hadoop集群环境下安装Mahout。环境:OS:Centos 6.5 x64 &
Soft:Hadoop 1.2.1 & Mahout
0.91、简介mahout项目主页:https://mahout.apache.org/下载二进制包,上传到服务器。2、安装用集群环境用户安装,解压二进制包。...
分类:
其他好文 时间:
2014-05-05 21:35:23
阅读次数:
429
简单介绍一下Linux的由来以及Linux和UNIX的关系Linux简介:
Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。它支持32位和64位硬件。Linu....
分类:
系统相关 时间:
2014-05-04 12:41:13
阅读次数:
610
1root口令丢失解决办法重启系统,再启动时任意键进入grub菜单,然后根据提示按e键进入编辑状态。
分类:
系统相关 时间:
2014-05-03 15:04:02
阅读次数:
324
本文主要介绍了MapReduce中的Combiner操作。在MapReduce的执行步骤中,我们一共分了8步,其中Map中的最后一步规约操作就是今天要讲的Combiner。首先看一下前文中的计数器:我们可以发现,其中有两个计数器:Combineoutputrecords和Combineinputrecords,他们的计数都是0,这是..
分类:
其他好文 时间:
2014-05-03 15:00:55
阅读次数:
323
本文主要介绍了MapReduce中的自定义计数器的相关内容。在上次的单词统计例子中,我们可以看到MapReduce在执行过程中会有很多的控制台输出信息,其中有一个很关键的内容:计数器。如下图:可以看到最上方的关键字:Counters,这就表示计数器。在这里,只有一个制表符缩进的表示..
分类:
其他好文 时间:
2014-05-03 14:56:19
阅读次数:
336
1.挂载光盘镜像2.配置yum文件Vim/etc/yum.repos.d/rhel-source.repo3.安装vsftpdYuminstallvsftpd4.主文件/etc/vsftpd/vsftpd.conf配置5.建立虚拟用户口令库文件login.txt6.生成vsftp的认证文件使用db_load命令生成认证文件,“-f”命令选项设置的值是虚拟用户的口令库文件,即..
分类:
系统相关 时间:
2014-05-03 14:55:33
阅读次数:
464
#!/bin/bash#thisscriptisonlyforCentOS6#checktheOSplatform=`uname-i`if[$platform!="x86_64"];thenecho"thisscriptisonlyfor64bitOperatingSystem!"exit1fiecho"theplatformisok"version=`lsb_release-r|awk‘{printsubstr($2,1,1)}‘`if[$version!=6];thenecho"thisscriptiso..
分类:
系统相关 时间:
2014-05-03 14:51:00
阅读次数:
415
Linux服务器限制ssh登录,查看登录日志1.查看端口占用情况$sudosu
#lsof-i:<NUM>
netstat-apn|grep<NUM>2.修改默认端口号22/etc/ssh/sshd_configPort22最好先添加一个端口号,然后启用成功之后再关闭端口22。然后重启sshd:sudo/etc/init.d/sshrestart没有反应,使..
分类:
其他好文 时间:
2014-05-03 14:43:53
阅读次数:
403
1.安装samba包。2.开启samba/etc/init.d/smbstart#启动Samba服务器/etc/init.d/smbstop#关闭Samba服务器/etc/init.d/smbstatus#查看服务器状态在RedHatEnterpriseLinux下,输入:smbclient-L//localhost查看共享的文件等信息3.配置/etc/samba/smb.com写入要共享的目录及用户访问..
分类:
系统相关 时间:
2014-05-03 14:43:14
阅读次数:
581