码迷,mamicode.com
首页 >  
搜索关键字:hadoop docommission shell 自动化    ( 56762个结果
Linux Shell环境手动安装Eclipse
原文地址: https://wiki.openmrs.org/pages/viewpage.action?pageId=16318792, 翻译内容有更改。 译者PC环境:CentOS 6.5 Eclipse版本: eclipse-jee-kepler-SR2-linux-gtk-x86_64.tar.gz (下载地址; http://www.eclipse.org/dow...
分类:系统相关   时间:2014-05-15 13:26:26    阅读次数:490
Hadoop-2.2.0中文文档—— MapReduce下一代- 可插入的 Shuffle 和 Sort
简介 可插入的 shuffle 和 sort 功能,允许在shuffle 和 sort 逻辑中用可选择的实现类替换。这个情况的例子是:用一个不是HTTP的应用协议,如RDMA来 shuffle 从Map节点中到Reducer节点的数据;或者用自定义的允许 Hash聚合和Limit-N查询的算法来代替sort逻辑。 重要: 可插入的 shuffle  sort 功能是实验性的、不稳定。这意味着提...
分类:其他好文   时间:2014-05-15 13:25:05    阅读次数:233
ubuntu上开启ssh服务,并搭建基于ssh的git服务器
维基百科上SSH的定义如下 Secure Shell(縮寫为SSH),由IETF的網路工作小組(Network Working Group)所制定;SSH為一项建立在应用层和传输层基础上的安全协议,为计算机上的Shell(壳层)提供安全的传输和使用环境。 安装ssh服务器 安装openssh-server $sudo apt-get install openssh-server 安装成功...
分类:其他好文   时间:2014-05-15 13:02:56    阅读次数:310
sqoop 1.4.3安装配置
sqoop1.4.3安装配置:1.解压tar包tar–zxvfsqoop-1.4.3.tar2.更改环境变量vi/etc/profile#添加下面两条记录 export$SQOOP_HOME=/opt/sqoop-1.4.3 PATH=$PATH:$SQOOP_HOME/bin3.复制sqoop-1.4.jarmysql-connector-java-5.1.10.jar到$HADOOP_HOME/lib/复制mysql-connector-java-..
分类:其他好文   时间:2014-05-15 08:50:40    阅读次数:342
shell脚本如何监控程序占用带宽?
众所周知,使用iftop能监控所有程序占用的网络带宽,一般情况下,手动执行iftop就可查看。但现在需要使用脚本来监控程序占用的带宽,遇到的问题真不是一点半点,现记录如下,希望能给其它运维人带来更多的帮助。中途所遇到的难点:1.iftop把结果重定向到文本中,是图形格式的。..
分类:其他好文   时间:2014-05-15 08:47:28    阅读次数:540
shell脚本-批量telnet
由于现网有时候要测试很多端口的连通性,所以就写了个小脚本,实现批量测试将telnet成功的写入到telnet_alive.txt中,失败则写入telnet_die.txt中#!/bin/bash#thisscripttestUPtootherhost.#Iplist=/opt/script_test/iplist.dataPortnumber=7001foripin$(catiplist.data)do(slee..
分类:Web程序   时间:2014-05-15 08:46:11    阅读次数:385
shell脚本真假判断(0为真,非0为假?或0为假,非0为真?)
在网络上,总有人说shell脚本的真假判断,有说0位真的,非0为假,但真的是这样吗?做个实验,写个0的判断语句执行结果是0istrue,那么我们想当然1是false了,做下测试:然而执行的结果却大相径庭,0是ture,1也是ture也就是说其他语言中(0为真,非0为假?或0为假,非0为真?)..
分类:其他好文   时间:2014-05-15 08:38:26    阅读次数:331
用shell脚本实现增加,删除用户,查询更改UID和GID以及统计用户数
学习linux是从基础的命令开始的,当熟悉命令后,我们就得学习shell脚本的编写。在实际运维中,我们不可能一直盯着服务器看,机器式的维护,而是通过脚本,实现自动化运维,这也是运维的一种趋势。本菜鸟也是刚刚接触shell脚本。今天兴致大发,就写来一个简单的”系统用户管理菜..
分类:其他好文   时间:2014-05-15 08:33:52    阅读次数:348
【redis运维】redis自动安装脚本(只安装redis)
Redis自动安装部署 本文总共分为4个部分: redis自动安装脚本目录结构说明; redis自动安装脚本内容; redis的操作系统服务脚本说明; 本文引用的资料链接地址。...
分类:其他好文   时间:2014-05-15 08:22:14    阅读次数:235
Hadoop MapReduce链式实践--ChainReducer
版本:CDH5.0.0,HDFS:2.3.0,Mapreduce:2.3.0,Yarn:2.3.0。场景描述:求一组数据中按照不同类别的最大值,比如,如下的数据:data1:A,10 A,11 A,12 A,13 B,21 B,31 B,41 B,51data2:A,20 A,21 A,22 A,23 B,201 B,301 B,401 B,501最后输出为:A,23 B,501假如这样的逻辑的m...
分类:其他好文   时间:2014-05-15 08:15:04    阅读次数:374
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!