本文是爬虫及可视化的练习项目，目标是爬取猫眼票房的全部数据并做可视化分析。 [toc] 1、获取url 我们先打开猫眼票房http://piaofang.maoyan.com/dashboard?date=2019 10 22 ，查看当日票房信息， 但是在通过xpath对该url进行解析时发现获取不 ...
分类：
编程语言 时间：
2019-10-27 12:24:30
阅读次数：
121
时序数据库InfluxDB（I）- 搭建与采集信息demo操作 ...
分类：
数据库 时间：
2019-10-27 12:23:45
阅读次数：
128
之前的工作总结还是写了太多文字了，可能在必要的地方加点图会比较好，所以之后的博客会注意。 1.上一篇文章说到的处理多数据源的问题，虽然用注解的方式切换数据源会十分的方便，但是在实际应用过程中，一个同事发现切换数据源的时间成本相当高，在实际的数据采集过程当中可能切换的比较频繁，所以后来是用了一种新的架 ...
分类：
其他好文 时间：
2019-10-27 01:17:06
阅读次数：
69
随着数字化，工业互联网，物联网的发展，我国加油站正向有人值守，无人操作，远程控制的方向发展，传统的人工巡查方式逐渐转变为以自动化控制为主的在线监控方式，即采用数据采集与监控系统 SCADA。SCADA 系统的推广使用，大大提高了我国加油站的监控效率，本文所讲的则是通过对加油站的可视化建模，结合 HT... ...
分类：
Web程序 时间：
2019-10-26 15:00:02
阅读次数：
106
认识Beats Beats是用于单用途数据托运人的平台。它们以轻量级代理的形式安装，并将来自成百上千台机器的数据发送到Logstash或Elasticsearch。 （画外音：通俗地理解，就是采集数据，并上报到Logstash或Elasticsearch） Beats对于收集数据非常有用。它们位于你 ...
分类：
其他好文 时间：
2019-10-26 10:31:41
阅读次数：
98
注意项 间隔为0表示监控项不采集数据，有关闭的期间，就必须有开启的期间 在规定的 0间隔期间外，监控项开始去采集数据。 除了这种方法 还可以在触发器中指定对时间的判断，从而实现对特定时间段的监控及告警。 ...
分类：
其他好文 时间：
2019-10-25 20:01:04
阅读次数：
88
对于flume的增量抽取，首先想到的就是常用的那几种方法，监控日志，触发器，版本号，时间戳等等，虽然可以实现，但都对数据源有了一定限制，假如客户的系统内部表没有那些东西，这就是一件很难搞的事了，毕竟对方数据库不能随便动。 这个时候可以采用 $@$，它可以表示增量列上一次查询的值。，将它加入sql语句 ...
分类：
Web程序 时间：
2019-10-25 18:28:04
阅读次数：
272
博客原文地址：https://www.cnblogs.com/qq260250932/p/5361043.html using System; using System.Collections.Generic; using System.Linq; using System.Text; using ...
UAVStack推出的JVM监控分析工具提供基于页面的展现方式，以图形化的方式展示采集到的监控数据；同时提供JVM基本参数获取、内存dump、线程分析、内存分配采样和热点方法分析等功能。
分类：
其他好文 时间：
2019-10-25 09:39:39
阅读次数：
73
官方定义：Logstash 是开源的服务器端数据处理管道，能够同时从多个来源采集数据，转换数据，然后将数据发送到您最喜欢的“存储库”中。 LogStash是重量级的，支持多数据获取机制，通过TCP/UDP协议、文件、syslog、windows Eventlogs及STDIN等；获取到数据后，它支持 ...
分类：
其他好文 时间：
2019-10-24 15:07:32
阅读次数：
102
