"""请求网页""" import requests import re import time import os headers={ 'user-agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, lik ...
分类：
编程语言 时间：
2020-03-03 20:55:20
阅读次数：
108
1 import urllib.request # 导入模块 2 import urllib.parse 3 4 # 将网页赋给变量file 5 file = urllib.request.urlopen("http://www.baidu.com") 6 7 # 读取网页 8 data = fil ...
分类：
编程语言 时间：
2020-03-03 20:52:33
阅读次数：
90
关于一些python爬虫示例代码 https://github.com/shengqiangzhang/examples-of-web-crawlers 提示：隔离区可通过gitee传送 参考：https://www.zhangshengrong.com/p/2EaE06do1M/ ...
分类：
编程语言 时间：
2020-03-03 16:19:43
阅读次数：
158
电影天堂里面的 要爬取这个页面里所有的电影信息，每个电影信息都在另一个html里，先在这里页面里把这些电影的url爬取出来 # 电影天堂爬虫 from lxml import etree import requests # 一个网址头 BASE_DOMAIN="https://www.dytt8.n ...
分类：
编程语言 时间：
2020-03-02 01:16:51
阅读次数：
113
JS逆向房天下登录RSA0x01目标网址aHR0cHM6Ly9wYXNzcG9ydC5mYW5nLmNvbS8NCg==0x02定位js1.随变输入账号和密码，点击登录，查看提交的参数2.我们可以看到，密码进行了加密，接下来我们搜索参数pwd3.点击跟进去，然后进行代码格式化，在pwd处打上断点0x03分析js1.打上断点之后，我们再次点击登录，停在了我们打断点的地方2.我们跟进去加密函数，代码格
分类：
编程语言 时间：
2020-03-01 00:57:50
阅读次数：
126
今天带大家分析一下某建筑市场监管平台的数据加密链接:aHR0cDovL2p6c2MubW9odXJkLmdvdi5jbi9kYXRhL2NvbXBhbnk=点击企业查询,发现返回的数据是经过加密后的数据1.寻找返回的数据既然数据是通过这个url返回的,全局搜索urlhttp://jzsc.mohurd.gov.cn/api/webApi/dataservice/query/comp/list?pg
分类：
编程语言 时间：
2020-03-01 00:53:50
阅读次数：
90
在某某花网上搜到一个视频，为了将视频下载到本地，我们尝试利用爬虫抓取资源 第一，我们检查网页元素，之后刷新页面 从上述信息中我们找到两个后缀名为.mp4的文件信息，其中第二条的status为206，留意它 点击这条信息，从中我们获取到了这条视频真正的URL 根据视频URL信息，参照之前爬取网页图片的 ...
分类：
编程语言 时间：
2020-03-01 00:08:55
阅读次数：
93
Requests库是Python爬虫中最最最最最最重要与常见的库，一定要熟练掌握它. 下面我们来认识这个库 Requests库是Python爬虫中最最最最最最重要与常见的库，一定要熟练掌握它. 下面我们来认识这个库 1 import requests 2 url = 'http://www.baid ...
分类：
编程语言 时间：
2020-02-29 20:29:01
阅读次数：
70
之前学习得是如何进行网络请求，现在开始学习如何进行数据提取 一、选取节点： 在火狐浏览器中，首先要有一个try xpath插件， 例如要找网页中所有得div，就在插件中搜索 就会把所有的div圈出来： 1、/ 就是在根节点下查找元素（直接子元素） 例如： 根节点下没有div,所以数量为0.div为子 ...
分类：
编程语言 时间：
2020-02-29 20:20:28
阅读次数：
54
FFmpeg 视频处理命令备忘 OI退役后，最近玩you get，发现下载下来的番剧视频和音频是分开的，于是为了给视频添加音轨，看了看FFmpeg 安装 macOS 命令格式 常用参数 注意： 参数主要是影响编码速度，编码速度越慢，生成的视频文件大小越小，并不会过大影响视频质量。 用法 查看文件信息 ...
分类：
其他好文 时间：
2020-02-29 00:18:34
阅读次数：
106
