先是进行了操作系统的复习整理 后是使用后羿采集器进行数据爬取 ...
分类:
其他好文 时间:
2020-05-03 16:47:10
阅读次数:
56
写在前面 在新版的K8S中,系统资源的采集均使用Metrics Server服务,可以通过Metrics Server服务采集节点和Pod的内存、磁盘、CPU和网络的使用率等信息。 读者可参考《 "【K8S】基于单Master节点安装K8S集群" 》一文搭建单Master节点的K8S集群。 说的具体 ...
分类:
其他好文 时间:
2020-05-03 14:21:00
阅读次数:
233
数据采集利用各种手段获取数据,数据样式不限制,但一般而言是形如excel或者csv这样的表格格式。数据采集:urllib,requests数据解析:Xpath,BS4,正则表达式数据持久化存储:pd.to_csv,pd.to_excel,MySQL,Redis数据预处理一般而言,数据分析和数据挖掘领域的处理的数据都是海量的数据,这样的数据难免会出现问题。数据预处理占到数据挖掘工作的60%,这是最重
分类:
编程语言 时间:
2020-05-03 00:58:59
阅读次数:
67
本月月初在职员工表(20来列,身份证、银行卡号等),本月离职员工表(10来列,计时、计件等),不考虑本月入职员工表,求下月月初在职员工表。 Python,import pandas as pd,两个pd.DataFrame为a和b,有共同列姓名,求差集a-b。我的方法是只有姓名列参与差集。 c=se ...
分类:
编程语言 时间:
2020-05-02 21:05:56
阅读次数:
92
import re # 月亮与六便士共7313词 # 傲慢与偏见加上面这本书共这么多词10781 s="I'm a father." with open("EnglishNovels/pride.txt", "r", encoding='utf8') as f: pattern=re.compile ...
分类:
编程语言 时间:
2020-05-02 19:03:37
阅读次数:
115
一、背景 Linux系统出现性能瓶颈时,往往因个别函数长时间占用CPU造成,解决问题的第一步就是定位到引起问题的函数,perf就是这样的工具,它是Linux内核源码提供的工具。 二、核心概念 1. 数据采集 perf通过采样的方式,记录CPU正在执行的函数名及函数的调用栈,通常采样频率是每秒99次, ...
分类:
系统相关 时间:
2020-05-02 17:23:05
阅读次数:
559
360度全景视频后视镜 汽车全景摄像头也叫全景泊车。它工作的原理是在车的前杠处的中网位置、后面牌照灯位置、左后视镜下端边缘处、右后视镜边缘处,这四个方位分别安装上广角摄像头,通过图像拼接的方式来采集车辆四周的影像环境,然后通软件处理矫正,在车载设备上显示一幅车辆四周的360度全景的俯视视频影像。 四 ...
分类:
其他好文 时间:
2020-05-02 09:22:26
阅读次数:
91
1. MQ的优缺点 优点: 解耦:通过MQ解除上游系统和下游系统的调用耦合,下游系统只需要做消息的订阅和取消订阅,上游系统无需任何改动。(一生产,多消费的典型场景) 异步:通过MQ将一些不需要同步获取执行的结果,并且非常耗时的调用操作通过MQ异步化。 削峰:通过MQ将一些高峰期的高并发流量积压在MQ ...
分类:
其他好文 时间:
2020-05-01 20:32:41
阅读次数:
81
背景 在Windows上使用WebRTC做视频采集,然后使用RTMP进行直播推流。默认情况下WebRTC只会采集麦克风的声音,而不会采集机器的背景声音。需要编码实现背景声音的采集和混音功能。 思路 Windows提供的API中有音频采集的相关方法,官方也给出了简单的说明和示例,虽然不能运行:)。所以 ...
分类:
Web程序 时间:
2020-04-30 19:48:55
阅读次数:
179
原因一:zabbix_agentd.conf文件中hostname配置错误,不与服务器host页面的hostname一致,导致active模式时,数据无法采集。解决办法:配置正确的hostname原因二:服务器和agentd配置正确,网络无防火墙,但是agentd所在的服务器本地时间与zabbix服务器端时间相差太大,导致数据无法采集解决办法:调整本地时间与服务器时间一致优化办法:配置NTP服务器
分类:
其他好文 时间:
2020-04-30 17:04:24
阅读次数:
130