collect_time.sh脚本需求： 遍历/dz目录下所有以A开头的文件夹，读取该文件夹下的time.log的首行内容，依次写入脚本的路径参数/lj/times.txt中。 编写collect_time.sh: #!/bin/bash file="time.log" readDir="/dz" ...
分类：
系统相关 时间：
2021-03-16 13:55:14
阅读次数：
0
安全术语 撞库：撞库攻击指的是黑客通过收集互联网上已泄露的用户账户信息，生成对应的字典表，再利用部分用户相同的注册习惯（即使用相同的用户名和密码），尝试登陆其它的网站或应用，以获取新的可利用账户信息。 爬虫：爬虫又称为网页蜘蛛，是一种按照既定规则，自动抓取网络上的指定信息的程序或脚本，可分为遍历爬取 ...
分类：
其他好文 时间：
2021-03-16 13:53:33
阅读次数：
0
1、为什么要引入Yarn和Spark。 (1)现有的hadoop生态系统中存在的问题 1）使用mapreduce进行批量离线分析； 2）使用hive进行历史数据的分析； 3）使用hbase进行实时数据的查询； 4）使用storm进行实时的流处理； (2)选用spark的原因 1） 应用于流式计算的S ...
分类：
其他好文 时间：
2021-03-16 13:32:12
阅读次数：
0
1. 阐述Hadoop生态系统中，HDFS, MapReduce, Yarn, Hbase及Spark的相互关系，为什么要引入Yarn和Spark。 HDFS是Hadoop体系中数据存储管理的基础，它是一个高度容错的系统，能检测和应对硬件故障，在低成本的通用硬件上运行。 HBase构建在HDFS之上 ...
分类：
其他好文 时间：
2021-03-16 13:21:18
阅读次数：
0
参考： https://redis.io/commands/eval 参考：https://redis.io/topics/ldb 1. redis-cli 命令行测试 命令如下：key 可以理解用于传键名称，而arg 用于传递其他参数 EVAL script numkeys key [key .. ...
分类：
其他好文 时间：
2021-03-16 11:59:42
阅读次数：
0
目前流行几种备份方式：逻辑备份、物理备份、双机热备份、备份脚本的编写等，本文分别从这些方面总结了MySQL自动备份策略的经验和技巧，一起来看看。 目前流行几种备份方式： 一、逻辑备份：使用mysql自带的mysqldump工具进行备份。备份成sql文件形式。 优点：最大好处是能够与正在运行的mysq ...
分类：
数据库 时间：
2021-03-16 11:56:10
阅读次数：
0
安装完webpack-cli之后，首次打包出现一下错误： 以管理员身份运行powershell 打开了powershell命令行之后,输入 set-ExecutionPolicy RemoteSigned 默认是n 选y就可以了 ...
分类：
移动开发 时间：
2021-03-16 11:49:12
阅读次数：
0
以表的操作和单条记录的增删改查为基础。 批量操作，需要进行进一步封装。 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.clie ...
分类：
编程语言 时间：
2021-03-15 11:32:26
阅读次数：
0
1. 为什么要引入Yarn和Spark。 从开源角度看，YARN的提出，从一定程度上弱化了多计算框架的优劣之争。YARN是在Hadoop MapReduce基础上演化而来的，在MapReduce时代，很多人批评MapReduce不适合迭代计算和流失计算，于是出现了Spark和Storm等计算框架，而 ...
分类：
其他好文 时间：
2021-03-15 11:29:44
阅读次数：
0
vim /usr/lib/systemd/system/nginx.service # 创建服务文件 nginx.service脚本内容如下： [Unit] # 服务的说明 Description=nginx # 描述服务 After=network.target # 描述服务类别 [Service ...
分类：
其他好文 时间：
2021-03-15 11:26:49
阅读次数：
0
