时间：2020.2.6 今天把昨天做到一半的首都之窗百姓信件爬取完成了。 源码如下： 1 import requests 2 import io 3 from bs4 import BeautifulSoup 4 #信1705-1 赵路仓 5 kv = {'user-agent': 'Mozilla ...
分类：
编程语言 时间：
2020-02-07 01:24:07
阅读次数：
110
今天本来想把昨天安装的intellij配置好，但是一直显示没有网络，网上查了相关资料也没有查出来解决办法。 然后暂停了intellij的配置，开始做了几个Python爬取简单数据的实例，先做了几个最简单的，以后再加大难度（用idle编码）： （1）京东商品页面爬取： 链接：https://item. ...
分类：
编程语言 时间：
2020-02-07 01:02:38
阅读次数：
79
分享一些常见的User-Agent，从网上搜集来的，可能不怎么完整。 User-Agent (1)百度 Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) Mozilla/5.0 (c ...
分类：
其他好文 时间：
2020-02-06 23:05:43
阅读次数：
102
在写blog时,想高亮某些字,但是发现markdown更改字体颜色不像word里那么方便,于是查了一下,要用一下代码进行更改字体颜色,还可以更改字体大小,还有字体格式 其实常用的就是更改一个颜色,且希望高亮,强调某些字罢了. 具体如下: 字体改成蓝色了 字体改成红色了 更多颜色可查表: 站在巨人的肩 ...
分类：
其他好文 时间：
2020-02-06 19:57:42
阅读次数：
106
select o.AgentId ,o.Date,o.profit from agentprofit as o join (select a.AgentId,MAX(Date) as max_Date from agentprofit as a GROUP BY a.AgentId) as t on ...
分类：
其他好文 时间：
2020-02-06 16:18:28
阅读次数：
55
今天主要进行了spark实验六的学习，Spark Streaming 编程初级实践 Flume 是非常流行的日志采集系统，可以作为 Spark Streaming 的高级数据源。请把 Flume Source 设置为 netcat 类型，从终端上不断给 Flume Source 发送各种消息，Flu ...
分类：
其他好文 时间：
2020-02-06 14:42:22
阅读次数：
107
import requests from lxml import etree ###网址 url="https://s.weibo.com/top/summary?Refer=top_hot&topnav=1&wvr=6" ###模拟浏览器 header={'User-Agent':'Mozilla ...
分类：
其他好文 时间：
2020-02-06 14:34:39
阅读次数：
73
datadog agent配置datadog.yaml dd_url: http://192.168.2.133:31636 重启datadog，service datadog-agent restart spring boot启动类： import org.springframework.boot ...
分类：
其他好文 时间：
2020-02-06 12:29:57
阅读次数：
68
Hotspot Follower 闲着没事，打算做一个爬取社会热点的项目，首先通过 "微信搜狗" 进行分析。 代码基于PYTHON 输出如下： ...
分类：
其他好文 时间：
2020-02-05 18:46:54
阅读次数：
72
Zabbix概述Zabbix是一个企业级的开源分布式监控解决方案，由C语言编写而成的底层架构（server端和agent端），由一个国外的团队持续维护更新，软件可以自由下载使用，运作团队靠提供收费的技术支持赢利。官方网站：http://×××w.zabbix.comZabbix通过C/S模式采集数据，通过B/S模式在web端展示和配置。被监控端：主机通过安装agent方式采集数据，网络设备通过SN
分类：
其他好文 时间：
2020-02-05 18:29:35
阅读次数：
80
