团队项目开发人员：邵文强，宁培强，邵瀚庆，潘新宇，李国峰，张晓亮 项目分析： 1. 引言 1.1 目的：为网络数据爱好者更好的收集数据 1.2背景：软件系统名称：网络爬虫 1.3 定义 ：网络爬虫 搜索引擎Web url信息互联网 1.4 参考资料 百度搜索 2.任务概述 2.1 目标 系统流程图： ...
分类：
其他好文 时间：
2017-09-07 21:31:04
阅读次数：
141
团队项目开发人员：邵文强，宁培强，邵瀚庆，潘新宇，李国峰，张晓亮 项目分析： 1. 引言 1.1 目的：为网络数据爱好者更好的收集数据 1.2背景：软件系统名称：网络爬虫 1.3 定义 ：网络爬虫 搜索引擎Web url信息互联网 1.4 参考资料 百度搜索 2.任务概述 2.1 目标 系统流程图： ...
分类：
其他好文 时间：
2017-09-07 21:28:05
阅读次数：
124
团队项目开发人员：邵文强，宁培强，邵瀚庆，潘新宇，李国峰，张晓亮 项目分析： 1. 引言 1.1 目的：为网络数据爱好者更好的收集数据 1.2背景：软件系统名称：网络爬虫 1.3 定义 ：网络爬虫 搜索引擎Web url信息互联网 1.4 参考资料 百度搜索 2.任务概述 2.1 目标 系统流程图： ...
分类：
其他好文 时间：
2017-09-07 21:20:56
阅读次数：
187
1. 引言 1.1 目的：为网络数据爱好者更好的收集数据 1.2背景：软件系统名称：网络爬虫 1.3 定义 ：网络爬虫 搜索引擎Web url信息互联网 1.4 参考资料 百度搜索 2.任务概述 2.1 目标 系统流程图： 1） 客户端向服务器发送自己设定好的请求 2）通过通过http将Web服务器 ...
分类：
其他好文 时间：
2017-09-07 19:23:37
阅读次数：
134
1. 引言 1.1 目的：为网络数据爱好者更好的收集数据 1.2背景：软件系统名称：网络爬虫 1.3 定义 ：网络爬虫 搜索引擎Web url信息互联网 1.4 参考资料 百度搜索 2.任务概述 2.1 目标 系统流程图 1） 客户端向服务器发送自己设定好的请求 2）通过通过http将Web服务器上 ...
分类：
其他好文 时间：
2017-09-07 16:08:22
阅读次数：
154
1. Flume简介 Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 当前Flume有两个版本Flume 0. ...
分类：
Web程序 时间：
2017-09-02 16:47:41
阅读次数：
912
在这之前,我们用过了collect终端操作了，当时主要是用来把Stream中所有的元素结合成一个List。在这里，你会发现collect是一个归约操作，就像reduce一样可以接收各种做法作为参数，将流中的累积成汇总结果。具体的做法是通过定义新的Collector接口来定义的，因此区分Collect ...
分类：
编程语言 时间：
2017-09-02 15:31:16
阅读次数：
280
第三方库API接口InfluxDB提供了各种语言的Http API接口的封装。具体可以看这里：https://docs.influxdata.com/influxdb/v0.10/clients/api/+同时，官方也提供了Telegraf插件来收集数据，除此之外还有collectd等比较常用的第三... ...
概观 项目只收集数据。要自动评估传入数据，我们需要定义触发器。触发器包含一个表达式，该表达式定义数据的可接受级别的阈值。 如果这一级别超出了传入的数据，触发器将“ fire 触发”或进入“' Problem 问题”状态 - 让我们知道发生的事情可能需要注意。如果该级别再次可以接受，则触发器返回到“O ...
分类：
其他好文 时间：
2017-08-26 18:33:26
阅读次数：
91
项目是在Zabbix收集数据的基础 ，所有项目都是围绕主机，找到创建的主机 点击 Configuration > hosts > ltems 点击 Create item Name：输入CPU Load 作为值。这将是列表和其他地方显示的项目名称 key：手动输入system.cpu.load 作为 ...
分类：
其他好文 时间：
2017-08-26 17:02:42
阅读次数：
149
