码迷,mamicode.com
首页 >  
搜索关键字:hadoop linux 环境搭建    ( 175382个结果
Hadoop之词频统计小实验(基于单节点伪分布)
声明:1)本文由我bitpeach原创撰写,转载时请注明出处,侵权必究。 2)本小实验工作环境为Ubuntu操作系统,hadoop1-2-1,jdk1.8.0。 3)统计词频工作在单节点的伪分布上,至于真正实际集群的配置操作还没有达到,希望能够由本文抛砖引玉。(一)Hadoop的配置修正 网上有很多...
分类:其他好文   时间:2014-05-05 21:54:47    阅读次数:456
Mahout安装
在Hadoop集群环境下安装Mahout。环境:OS:Centos 6.5 x64 & Soft:Hadoop 1.2.1 & Mahout 0.91、简介mahout项目主页:https://mahout.apache.org/下载二进制包,上传到服务器。2、安装用集群环境用户安装,解压二进制包。...
分类:其他好文   时间:2014-05-05 21:35:23    阅读次数:429
Linux和UNIX
简单介绍一下Linux的由来以及Linux和UNIX的关系Linux简介: Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。它支持32位和64位硬件。Linu....
分类:系统相关   时间:2014-05-04 12:41:13    阅读次数:610
linux 故障排除
1root口令丢失解决办法重启系统,再启动时任意键进入grub菜单,然后根据提示按e键进入编辑状态。
分类:系统相关   时间:2014-05-03 15:04:02    阅读次数:324
Hadoop初学指南(8)--MapReduce中的Combiner操作
本文主要介绍了MapReduce中的Combiner操作。在MapReduce的执行步骤中,我们一共分了8步,其中Map中的最后一步规约操作就是今天要讲的Combiner。首先看一下前文中的计数器:我们可以发现,其中有两个计数器:Combineoutputrecords和Combineinputrecords,他们的计数都是0,这是..
分类:其他好文   时间:2014-05-03 15:00:55    阅读次数:323
Hadoop初学指南(7)--MapReduce自定义计数器
本文主要介绍了MapReduce中的自定义计数器的相关内容。在上次的单词统计例子中,我们可以看到MapReduce在执行过程中会有很多的控制台输出信息,其中有一个很关键的内容:计数器。如下图:可以看到最上方的关键字:Counters,这就表示计数器。在这里,只有一个制表符缩进的表示..
分类:其他好文   时间:2014-05-03 14:56:19    阅读次数:336
Linux-vsftp服务配置
1.挂载光盘镜像2.配置yum文件Vim/etc/yum.repos.d/rhel-source.repo3.安装vsftpdYuminstallvsftpd4.主文件/etc/vsftpd/vsftpd.conf配置5.建立虚拟用户口令库文件login.txt6.生成vsftp的认证文件使用db_load命令生成认证文件,“-f”命令选项设置的值是虚拟用户的口令库文件,即..
分类:系统相关   时间:2014-05-03 14:55:33    阅读次数:464
Linux系统优化脚本
#!/bin/bash#thisscriptisonlyforCentOS6#checktheOSplatform=`uname-i`if[$platform!="x86_64"];thenecho"thisscriptisonlyfor64bitOperatingSystem!"exit1fiecho"theplatformisok"version=`lsb_release-r|awk‘{printsubstr($2,1,1)}‘`if[$version!=6];thenecho"thisscriptiso..
分类:系统相关   时间:2014-05-03 14:51:00    阅读次数:415
Ubuntu Server 14.04 配置ssh登录
Linux服务器限制ssh登录,查看登录日志1.查看端口占用情况$sudosu #lsof-i:<NUM> netstat-apn|grep<NUM>2.修改默认端口号22/etc/ssh/sshd_configPort22最好先添加一个端口号,然后启用成功之后再关闭端口22。然后重启sshd:sudo/etc/init.d/sshrestart没有反应,使..
分类:其他好文   时间:2014-05-03 14:43:53    阅读次数:403
linux-samba服务配置
1.安装samba包。2.开启samba/etc/init.d/smbstart#启动Samba服务器/etc/init.d/smbstop#关闭Samba服务器/etc/init.d/smbstatus#查看服务器状态在RedHatEnterpriseLinux下,输入:smbclient-L//localhost查看共享的文件等信息3.配置/etc/samba/smb.com写入要共享的目录及用户访问..
分类:系统相关   时间:2014-05-03 14:43:14    阅读次数:581
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!