简介 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器， 完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器。 环境安装 下载安装sele ...
分类：
其他好文 时间：
2020-06-30 20:54:19
阅读次数：
65
最近正好在开发这个生辰八字的，之前用的一套代码，发现计算出来的生辰八字不对，于是在网上找了一个新的方法，但是这个方法在计算月柱的时候不对，于是又是一顿百度搜索，可惜这块的很少，还好最后还是找到了一个人改良版的，将月柱计算的bug问题修复了。下面是完整的代码，大家可以参考下。 class Sizhu ...
分类：
编程语言 时间：
2020-06-30 18:54:42
阅读次数：
113
大数据的时代，网络爬虫已经成为了获取数据的一个重要手段。 但要学习好爬虫并没有那么简单。首先知识点和方向实在是太多了，它关系到了计算机网络、编程基础、前端开发、后端开发、App 开发与逆向、网络安全、数据库、运维、机器学习、数据分析等各个方向的内容，它像一张大网一样把现在一些主流的技术栈都连接在了一 ...
分类：
编程语言 时间：
2020-06-30 14:26:14
阅读次数：
46
爬虫基础 什么是爬虫？ 爬虫就是通过编写程序模拟浏览器上网，让其去互联网上抓取数据的过程。 抓取互联网上的数据，为我所用，有了大量的数据，就如同有了一个数据银行一样，下一步做的就是如何将这些爬取的数据产品化，商业化。 爬虫的合法性探讨 爬虫作为一种计算机技术就决定了它的中立性，因此爬虫本身在法律上并 ...
分类：
其他好文 时间：
2020-06-30 11:05:52
阅读次数：
63
源代码: import requests path = "D:\abc.jpg" #用\或/（老师用的）存疑 r.encoding = r.apparent_encoding kv = {'user-agent':'Mozilla/5.0'} url = "见列表" r = requests.get ...
分类：
编程语言 时间：
2020-06-29 15:37:10
阅读次数：
77
import re import requests from bs4 import BeautifulSoup from openpyxl import Workbook from openpyxl.styles import Alignment requests：网页爬取的第三方库 re：内容解析 ...
分类：
编程语言 时间：
2020-06-29 13:22:06
阅读次数：
66
解题报告 学生：陈睿泽 【引言】 这是一道我们机房的练习题目，传说 wjz 和 hsy 用了10min就秒切了，而我这个无力的小蒟蒻调了 1h 才打了出来。 【题目描述】 多多今天很高兴，因为他的好朋友苹果要过生日了。由于今天多多得到了两张价值不菲的 SHOP 购物券，所以他决定买 \(N\) 件礼 ...
分类：
其他好文 时间：
2020-06-28 20:37:38
阅读次数：
42
python爬虫：BeautifulSoup 使用select方法详解 1 html = """ 2 <html><head><title>The Dormouse's story</title></head> 3 <body> 4 <p class="title" name="dromouse"> ...
分类：
编程语言 时间：
2020-06-28 20:23:17
阅读次数：
61
注：看不清的右键图片，在新标签页打开图片！ 基础知识1 基础知识2 数据类型 字符串 序列 条件循环 列表元组 字典集合 函数1 函数2 文件对象 模块 面向对象 错误&异常 常用标准库及扩展 标准库概述 正则表达式 日期时间 系统、文件 进程、线程 数据库 数学运算、简单结构 爬虫基础知识 req ...
分类：
编程语言 时间：
2020-06-28 15:31:18
阅读次数：
125
爬虫其实就是对网页内特定id、class、标签内容的提取，多是循环出来的，对我们爬取非常便利。 1.安装node node官网下载安装包安装，后在命令行工具中输入node -v查看node安装的版本。 2.实现项目 创建项目并进入 mkdir node-worm && cd node-worm 初始 ...
分类：
Web程序 时间：
2020-06-28 15:12:30
阅读次数：
69
