架构图 考虑到日志系统的可扩展性以及目前的资源（部分功能复用），整个ELK架构如下： 架构解读 : （整个架构从左到右，总共分为5层） 第一层、数据采集层 最左边的是业务服务器集群，上面安装了filebeat做日志采集，同时把采集的日志分别发送给两个logstash服务（2.187、2.189） 第 ...
分类：
其他好文 时间：
2019-07-04 17:38:00
阅读次数：
181
先收集一批核心关键词作为词根 围绕词根进行挖词（百度下拉及相关） 过滤违禁词，自定义黑名单，重复词 统计扩展词与对应词根的相似度，（python备选：jieba词库）归类，相似值>=0.45的为同类词 相关且有搜索量的词，进入该行业频道的词表，生成的页面给予最大的资源支持；相关但无搜索量的，给予较小 ...
分类：
其他好文 时间：
2019-07-04 09:52:22
阅读次数：
259
看到很多网友都为织梦（DEDE CMS）的采集教程头疼，的确，官方出的教程太笼统了，什么都没说，换个网站你什么都做不了，这个教程是最详尽的教程，让你一看即会 首先我们打开织梦后台点击 采集——采集节点管理——增加新节点 这里我们以采集普通文章为例，我们选择普通文章，然后确定 我们进入了采集的设置页面 ...
分类：
其他好文 时间：
2019-07-03 13:30:27
阅读次数：
148
随着电商的冲击，门店租金的提高，零售行业普遍叹息凛冬将至。如何度过寒冬，在激烈的市场竞争中占得一席之地，是很多零售行业的人士在思考的问题。其中一些有先见知名的领导者，开始借助信息化的力量来帮助门店。而这催生了客流统计分析系统。智能客流分析系统主要应用于客流数据的采集分析，给使用者提供所需信息，主要包... ...
分类：
其他好文 时间：
2019-07-02 19:11:45
阅读次数：
113
大数据平台是对海量结构化、非结构化、半机构化数据进行采集、存储、计算、统计、分析处理的一系列技术平台。大数据平台处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据仓库工具无法处理完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的各 ...
分类：
其他好文 时间：
2019-07-02 13:26:42
阅读次数：
126
本文将介绍UAVStack的心跳机制及容器、进程数据采集。
分类：
系统相关 时间：
2019-07-01 18:30:58
阅读次数：
331
$pn = $_GET['pn']; array('img','src'), 'title'=>array('.titlelnk','text'), 'content'=>array('.post_item_summary','text'), 'content_url'=>array('.titl.... ...
分类：
其他好文 时间：
2019-06-29 10:50:27
阅读次数：
215
如果想在线直接采集一点数据 可以使用 在线QueryList采集 这里也可以实现 xpath采集在线测试 这里为你解决: 怎么在线采集数据 不用安装软件 想采集少量数据, 不安装软件怎么实现 想采集一点网上的数据,怎么实现简单 querylist在线使用, 不用安装 小白怎么采集数据 不懂编程怎么采 ...
分类：
其他好文 时间：
2019-06-29 10:45:14
阅读次数：
77
监控 资源指标和资源监控 一个集群系统管理离不开监控，同样的Kubernetes也需要根据数据指标来采集相关数据，从而完成对集群系统的监控状况进行监测。这些指标总体上分为两个组成：监控集群本身和监控Pod对象，通常一个集群的衡量性指标包括以下几个部分： 节点资源状态：主要包括网络带宽、磁盘空间、CP ...
分类：
其他好文 时间：
2019-06-29 10:39:41
阅读次数：
118
日志 ? K8S系统的组件日志 ? K8SCluster里面部署的应用程序日志 方案一:Node上部署一个日志收集程序 ? DaemonSet方式部署日志收集程序 ? 对本节点/var/log和 /var/lib/docker/containers/ 两个目录下的日志进行采集 方案二:Pod中附加专 ...
分类：
其他好文 时间：
2019-06-29 10:35:00
阅读次数：
95
