码迷,mamicode.com
首页 >  
搜索关键字:hadoop linux 环境搭建    ( 175382个结果
2_Shell语言———bash简介
一、初识bashBash是一种解释型语言,但它也提供了交互式接口,支持变量,因此提供了编程环境,所以可以称bash为程序语言。解释型语言属于弱类型语言,其特点为:1.它不强制区分变量类型,即无论存储什么数据,默认均以字符格式(ASCII码)存储。2.不需要事先声明变量,需要时直..
分类:其他好文   时间:2014-05-03 02:09:05    阅读次数:476
rhel下文件的同步:sersync实时同步和drbd双向同步
sersync(873端口)实时同步(单向同步)需要注意:纯粹的使用rsync做单向同步时,rsynx的守护进程是运行在文件推送服务器上,而接收的服务器是运行rsync客户端。使用sersync做文件实时同步刚好相反,用于接收文件的服务器运行rsync守护进程。sersync主要用于服务器同步,web镜像等..
分类:其他好文   时间:2014-05-03 01:58:08    阅读次数:849
linux文件属性知识总结
linux文件属性可以使用ls-l命令查看。文件属性为以下1.文件类型:-,d,l,b,c,s等2.文件链接数#创建文件链接命令 ln[-s创建软连接]targetlink_name #默认创建硬链接3.文件读写执行属性4.文件属主和群5.文件大小ls-h #以友好方式显示文件大小6.文件时间属性#mtime(modificati..
分类:系统相关   时间:2014-05-03 01:55:59    阅读次数:504
Hadoop初学指南(5)--MapReduce入门
本文将介绍Hadoop中的重点MapReduce的入门知识。(1)MapReduce概述MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题。MR由两个阶段组成:Map和Reduce,在Hadoop中用户只需要实现map()和reduce()两个函数,即可实现分布式计算,非常简单..
分类:其他好文   时间:2014-05-03 01:53:48    阅读次数:519
Hadoop初学指南(6)--MapReduce的简单实例及分析
本文在上一节的基础上通过一个简单的MR示例对MapReduce的运行流程进行分析。假设有两行数据,分别是helloyou,hellome,我们要统计其中出现的单词以及每个单词出现的次数。所得的结果为hello2you1me1(1)大致运行流畅1.解析成2个<k,v>,分别是<0,helloyou><10,hel..
分类:其他好文   时间:2014-05-03 01:51:40    阅读次数:382
基于Ansible实现批量管理
基于Ansible实现批量管理Ansible提供一种最简单的方式用于发布、管理和编排计算机系统的工具,可在数分钟内搞定,Ansible本身是一种python程序,只需要配置一个节点,只要ssh连接ok被控制节点不需要安装任何工具,就可以实现远程连接执行任何操作支持多节点发布、远程任务执行..
分类:其他好文   时间:2014-05-03 01:38:43    阅读次数:595
Linux Windows对NTFS移动盘的写入
一块西数1G的移动盘(2.5寸),厂家格式化为NTFS格式的文件系统。最先挂到Windows7机器上,拷入50G的文件,主要为MKV封装的电影和对应的字幕文件。刚开始拷速度很快,大约70M/秒,但是很快就降到32M/秒左右。拷贝完成后立即拔下,移动盘烫手。后来挂到Ubuntu(版本14.04)下,也..
分类:移动开发   时间:2014-05-03 01:17:02    阅读次数:418
CentOS 6.5 Corosync+Pacemaker crm实现DRBD高可用过程及DRBD详解
DRBD(DistributedReplicatedBlockDevice)分布式复制块设备,它是Linux平台上的分散式储存系统,通常用于高可用性(highavailability,HA)集群中。DRBD类似磁盘阵列的RAID1(镜像),只不过RAID1是在同一台电脑内,而DRBD是透过网络。DRBDResource:DRBD所具有的几种属性:resou..
分类:其他好文   时间:2014-05-03 01:12:42    阅读次数:747
Lnmmp动静分离简易架构
拓扑如下图所示;本次环境全部为:Centos6.5-64位;一、先安装Mariadb数据库(编译安装与mysql的安装方法一样,此处不做详解);通用二进制格式安装;#mkdir-pv/mydata/data/ #chown-Rmysql:mysq/mydata/data/ #tarxfmariadb-10.0.10-linux-x86_64.tar.gz-C/usr/local/ #ln-svmar..
分类:其他好文   时间:2014-05-03 00:44:35    阅读次数:473
4_Shell语言———脚本概述
一、初识脚本简单说,脚本就是数条可执行语句的罗列。例如我们将以下可执行命令粘贴至first.sh这个文件中:UserName=user1 mkdir/users useradd-d/users/$UserName$UserName echo$UserName|passwd--stdin$UserName这样first.sh就是一个脚本,sh用来标注这是一个shell脚本,它能..
分类:其他好文   时间:2014-05-02 02:49:26    阅读次数:390
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!