运用MapReduce来统计一个文章的重复的字数 1.准备一篇文章，并且上传到hdfs 注意编码是要utf 8 这样上传到liunx上面才不会乱码 先上传到linux ：rz 在上传到hdfs ：hadoop fs put 琵琶行.txt / 2.写MapReduce程序 MapReduce基于ya ...
分类：
其他好文 时间：
2020-03-05 00:59:47
阅读次数：
69
Linux系统均可以自己写脚本命令来解析动态域名，支持IPV4和IPV6的动态域名解析直接上代码：先上IPV4的syncold=$(catip.asp)sleep10new=$(ifconfigvlan2|awk‘/inet/‘)if["$old"!="$new"]thenrm-rfip.aspecho$new>ip.aspwget&q
分类：
系统相关 时间：
2020-03-04 22:39:53
阅读次数：
348
1、查询端口号占用，根据端口查看进程信息 [root@server2 ~]# lsof -i:80COMMAND PID USER FD TYPE DEVICE SIZE NODE NAMEhttpd 5014 root 3u IPv4 14346 TCP server2:http (LISTEN) ...
分类：
其他好文 时间：
2020-03-04 09:29:02
阅读次数：
83
//fs文件系统模块 let fs = require('fs') let http = require('http') // 读取文件操作 // 第一个参数为相对路径(也可传入绝对路径__dirname：代表当前目录的绝对路径，是一个字符串) // 第二个参数是一个回调函数 //console.l ...
分类：
其他好文 时间：
2020-03-04 00:24:54
阅读次数：
72
配置core-site.xml <configuration> <!-- 把两个NameNode）的地址组装成一个集群mycluster --> <property> <name>fs.defaultFS</name> <value>hdfs://mycluster</value> </proper ...
分类：
其他好文 时间：
2020-03-04 00:07:55
阅读次数：
86
需要使用Robot Framework写测试用例。 使用python的sshClient在指定容器创建目录。 本来用的方法 podname = send('kubectl get pods -n test | grep rsync | awk '{print $1}') send('kubectl ...
分类：
其他好文 时间：
2020-03-02 22:47:25
阅读次数：
75
awk布尔值 在awk中，没有像其它语言一样专门提供true、false这样的关键字。 但它的布尔值逻辑非常简单： 数值0表示布尔假 空字符串表示布尔假 其余所有均为布尔真 字符串"0"也是真，因为它是字符串 awk中，正则匹配也有返回值，匹配成功则返回1，匹配失败则返回0 awk中，所有的布尔运算 ...
分类：
其他好文 时间：
2020-03-02 20:38:01
阅读次数：
69
数据类型 gawk有两种基本的数据类型：数值和字符串。在gawk 4.2.0版本中，还支持第三种基本的数据类型：正则表达式类型。 数据是什么类型在使用它的上下文中决定：在字符串操作环境下将转换为字符串，在数值操作环境下将转换为数值。这和自然语言中的一个词语、一个单词在不同句子内的不同语义是一样的。 ...
分类：
其他好文 时间：
2020-03-02 16:21:17
阅读次数：
88
ubuntu卸载软件的步骤：1.第一步，常规卸载sudo apt-get purge 软件名 //卸载软件2.第二步，清理一些不需要的文件sudo apt-get autoremove //自动清理一些程序sudo apt-get autoclean 3.第三步，删除不需要的配置文件dpkg -l ...
分类：
系统相关 时间：
2020-03-02 12:51:17
阅读次数：
86
简介：在Linux/UNIX系统中，awk是一个功能强大的编辑工具，逐行读取输入文本，并根据指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于Shell脚本，完成各种自动化配置任务。工作原理逐行读取文本,默认以空格为分隔符进行分隔,将分隔所得的各个字段保存到内建变量中,并按模式或者条件执行编辑命令常见用法：单引号加上大括号“
分类：
系统相关 时间：
2020-03-01 22:02:39
阅读次数：
75
