1、为什么要引入Yarn和Spark。 (1)现有的hadoop生态系统中存在的问题 1）使用mapreduce进行批量离线分析； 2）使用hive进行历史数据的分析； 3）使用hbase进行实时数据的查询； 4）使用storm进行实时的流处理； (2)选用spark的原因 1） 应用于流式计算的S ...
分类：
其他好文 时间：
2021-03-16 13:32:12
阅读次数：
0
DC-5 存活探测 端口扫描 从80入手 conract提交后，发现日期有变化，并且参数变量可控，猜测文件包含 尝试包含/etc/passwd 从日志文件入手 尝试写入shell 失败了很多次，恢复快照后，ip变了 反弹shell 返回交互式 中途断了一次，换了端口 python反弹 提权（/bin ...
分类：
其他好文 时间：
2021-03-16 11:54:54
阅读次数：
0
以表的操作和单条记录的增删改查为基础。 批量操作，需要进行进一步封装。 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.clie ...
分类：
编程语言 时间：
2021-03-15 11:32:26
阅读次数：
0
自定义方法： 文件 >首选项 >键盘快捷方式 批量缩进 Ctrl + [ //向左缩进 Ctrl + ] //向右缩进 转变大写/小写（自定义的） Ctrl + 7 //大写 Ctrl + 8 //小写 拆分编辑器 Ctrl + \ ...
分类：
其他好文 时间：
2021-03-15 10:54:41
阅读次数：
0
rootfs:根文件系统 /boot:系统启动相关的文件，如内核、initrd，以及grub(bootloader) /dev:设备文件 设备文件： 块文件：随机访问，数据块 字符设备：线性访问，按字符为单位 设备号：主设备号（major）和次设备号（minor） /etc:配置文件 /home:管 ...
分类：
系统相关 时间：
2021-03-15 10:49:44
阅读次数：
0
什么是Elastic Shell Elastic Shell是一套完全用Bash Shell编写的，用于管理Elasticsearch搜索引擎的工具脚本。目前，它提供了针对index和snapshot的基本管理，并提供了针对reindex和Elasticsearch集群升级的辅助自动化。 本质上，E ...
分类：
系统相关 时间：
2021-03-15 10:42:46
阅读次数：
0
1、将函数存储在模块里 def fun1(x): ## 在模块module1.py中定义三个函数 print(x.upper()) def fun2(x): print(x.title()) def fun3(x): print(" ",x) 2、测试能否直接调用函数 >>> fun1("aaa") ...
分类：
编程语言 时间：
2021-03-15 10:39:46
阅读次数：
0
一、编程语言 1、C和C++ 《C Primer Plus》 《C和指针》 《C专家编程》 《C陷阱与缺陷》 《Essential C++》 《C++ Primer》 2、Java 《Java核心技术·卷 I》 《Java核心技术·卷 II》 《Java编程思想》 《深入理解Java虚拟机》 《实战 ...
分类：
其他好文 时间：
2021-03-15 10:30:29
阅读次数：
0
_bulk api POST /_bulk 批量操作 POST _bulk { "index" : { "_index" : "movies", "_id" : "1" } } { "year" : 1994 } { "delete" : { "_index" : "movies", "_id" : ...
分类：
其他好文 时间：
2021-03-11 20:50:46
阅读次数：
0
常用命令 基础命令 alias alias name='command1;command2;...' #添加别名 unalias name #删除别名 重定向 标注输入（stdin,默认为键盘输入）/标准输出（stdout,默认为屏幕输出）和标准错误（stderr） IO重定向是改变了输入来源和输出 ...
分类：
系统相关 时间：
2021-03-11 20:36:13
阅读次数：
0
