SpringCloudFlow与ApacheSpark集成点击左上角，关注：“锅外的大佬”专注分享国外最新技术内容帮助每位开发者更优秀地成长1.简介SpringCloudDataFlow是用于构建数据集成和实时数据处理管道的工具包。在这种情况下，管道(Pipelines)是使用SpringCloudStream或SpringCloudTask框架构建的SpringBoot应用程序。在本教程中，我们
分类：
编程语言 时间：
2020-09-07 19:17:49
阅读次数：
55
其实webscraper说到底就是那点儿东西，所有的网站都是大同小异，但是都还不同。这也是好多同学总是遇到问题的原因。因为没有统一的模板可用，需要理解了webscraper的原理并且对目标网站加以分析才可以。今天再介绍一篇关于webscraper抓取数据的文章，除了webscraper的使用方式外，还包括一些简单的数据处理和分析。都是基础的不能再基础了。选择这个网站一来是因为作为一个开发者在上面买
分类：
Web程序 时间：
2020-08-29 15:16:51
阅读次数：
63
本篇文章主要是手把手教你搭建ELK实时日志分析平台，那么，ELK到底是什么呢？ELK是三个开源项目的首字母缩写，这三个项目分别是：Elasticsearch、Logstash和Kibana。Elasticsearch是一个搜索和分析引擎。Logstash是服务器端数据处理管道，能够同时从多个来源采集数据，转换数据，然后将数据发送到诸如Elasticsearch等存储库中。Kibana则可以让用户在
分类：
其他好文 时间：
2020-08-28 11:57:17
阅读次数：
289
电力自动化在线数据采集报表系统，由南京畅洋科技有限公司自主研发。使用该系统，用户只需简单的配置，便可轻松获取想要的数据。该系统通过嵌入SpreadJS纯前端表格控件，可应对电力系统中针对数据处理的各项需求，让数据变得更有价值。下面，让我们一起来看看如何在“电力自动化在线数据采集报表系统”中应用表格技术，实现“数据填报”与高性能多点数据实时采集的。案例名称：电力自动化在线数据采集报表系统项目背景随着
分类：
Web程序 时间：
2020-08-25 18:37:58
阅读次数：
69
第九章.用正则表达式进行搜索 １.正则表达式介绍 正则表达式是用来匹配文本的特殊的串（字符集合）。 启动MySQL遇到的问题： MySQL没有启动。 2.使用MySQL正则表达式 a.基本字符匹配 他告诉MySQL：REGEXP后所跟的东西为正则表达式处理。 MySQL子3.23.4版本后就不区分大 ...
分类：
数据库 时间：
2020-08-25 15:44:12
阅读次数：
52
问题描述 zabbix server 平稳运行有一段时间了，但是最近问题却来了，今天早上收到zabbixserver磁盘空间不足的告警。通过查看之后发现是大部分数据是zabbix 库的的数据 在进一步查看发现是history表和history_uint数据太多导致磁盘占用过多。 问题分析 histo ...
分类：
其他好文 时间：
2020-08-24 15:15:48
阅读次数：
54
一、Job概述一）、Job负责处理短暂的一次性任务，即仅执行一次的任务，它保证批处理任务的一个或多个pod成功结束。今天我们来给大家介绍另外?类资源对象：Job，我们在日常的工作中经常都会遇到?些需要进行批量数据处理和分析的需求，当然也会有按时间来进行调度的?作，Kubernetes集群中为我们提供了Job和CronJob两种资源对象来应对这种需求。*Job负责处理任务，即仅执??次的任务，它保证
分类：
Web程序 时间：
2020-08-20 18:38:48
阅读次数：
73
理解过滤器 功能: 对要显示的数据进行特定格式化后再显示 注意: 并没有改变原本的数据, 可是产生新的对应的数据 定义和使用过滤器 定义过滤器 Vue.filter(filterName, function(value[,arg1,arg2,...]){ // 进行一定的数据处理 return ne ...
分类：
其他好文 时间：
2020-08-18 15:45:39
阅读次数：
119
1. 简介：DMETL(目前的版本是4.0)是达梦数据库有限公司在上十年数据处理经验的基础上，研制开发的具有自主版权的、商品化的数据集成软件，实现了对数据抽取、传输、整合、以及装载的一站式支持，是构建数据中心、数据仓库、数据交换和数据同步等应用的理想工具。 同类型ETL工具有：informatic、 ...
分类：
其他好文 时间：
2020-08-15 22:27:37
阅读次数：
62
1、坐标数据处理 去掉代号，依次为经度、纬度和标签，如： x y 拐点标记 563084.260000 2565350.393000 W1 567398.760000 2562671.128000 W2 567697.650000 2557374.344000 W3 543990.750000 25 ...
分类：
其他好文 时间：
2020-08-13 12:41:51
阅读次数：
63
