测试网络工具在命令行下测试网络的连通性显示主机名 hostname测试网络连通性 ping显示正确的路由表 iproute跟踪路由 traceroute tracepath mtr确定名称服务器使用 nslookup hos
分类：
系统相关 时间：
2019-10-26 17:24:35
阅读次数：
121
对于flume的增量抽取，首先想到的就是常用的那几种方法，监控日志，触发器，版本号，时间戳等等，虽然可以实现，但都对数据源有了一定限制，假如客户的系统内部表没有那些东西，这就是一件很难搞的事了，毕竟对方数据库不能随便动。 这个时候可以采用 $@$，它可以表示增量列上一次查询的值。，将它加入sql语句 ...
分类：
Web程序 时间：
2019-10-25 18:28:04
阅读次数：
272
[TOC]前言：IP地址的概述与应用一：IP地址1.1：IP地址的定义及分类网络部分：区分IP地址是否属于同一网段主机部分：网络中的节点标识（不同）私有地址1.2：子网掩码二：IP地址的配置2.2：测试IP地址
分类：
其他好文 时间：
2019-10-24 21:50:06
阅读次数：
119
Tomcat支持三种接收请求的处理方式：BIO、NIO、APR 。 所需软件的下载地址 安装依赖 安装软件 修改配置 测试 注：如果非root用户启动失败，把apr环境变量在当前用户的.bash_profile中写一份 配置说明 Executor参数说明 Connector参数说明 ...
分类：
其他好文 时间：
2019-10-21 11:54:41
阅读次数：
98
Flume配置文件： 但是在启动Flume时，报以下错误： 解决方案： 由于用到了agent的sink是 org.apache.spark.streaming.flume.sink.SparkSink类型，需要把spark streaming flume sink_2.11 2.4.3.jar复制到 ...
分类：
Web程序 时间：
2019-10-16 13:43:59
阅读次数：
98
今日思语：每天都要不一样，那么每天就应该多学习 在安装完nginx之后，我们可以使用nginx的测试命令来验证下nginx.conf的配置是否正确： 方式一：不指定文件 如上可知/etc/nginx/nginx.conf文件的第34行配置错误 方式二：指定文件 ...
分类：
其他好文 时间：
2019-10-14 12:38:49
阅读次数：
114
第1章 概述 1.1 Flume定义 Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。 下面我们来详细介绍一下Flume架构中的组件。 1.2.1 Agent Agent是一个JVM进程，它以事件的形式将数据从源头送 ...
分类：
Web程序 时间：
2019-10-13 21:05:20
阅读次数：
155
1.限制ip访问： 白名单 allow 127.0.0.1；##允许127.0.0.1访问 deny all；##其他ip全部拒绝 黑名单 deny 127.0.0.1；##拒绝这个ip访问 deny 1.1.1.1；##拒绝访问 配置 测试 2.需求：访问/admin.php/目录的请求，只允许管 ...
分类：
其他好文 时间：
2019-10-13 15:25:43
阅读次数：
109
配置hadoop环境 配置flume环境 配置flume文件 D:\Soft\apache-flume-1.8.0-bin\conf 将 flume-conf.properties.template 重新命名为 hdfs.properties # 组装 agenta1.sources = s1a1. ...
分类：
Web程序 时间：
2019-10-12 11:26:24
阅读次数：
252
1、前言 从druid的0.11版本开始，我就开始关注它，每一次的版本的更新，druid都会使用户体验、性能更好，从以前手写配置文件到可视化的界面操作，从实时节点进行任务提交到现在的索引服务等 流处理： 日志监控（Flume/Airflow） > 消息中间件（kafka、MQ） > 流处理（spar ...
分类：
Web程序 时间：
2019-10-11 18:03:32
阅读次数：
122
