码迷,mamicode.com
首页 >  
搜索关键字:selenium 爬虫    ( 16232个结果
java之爬虫菜鸟运用
主要是一个简单的demo测试 1.首先找到一个html查看源码如图 如果是这样的一段代码,我们的目标是获取a标签中的href内容,和文本内容,以及<span></span>标签中的日期,和p标签中的数据 2.开始做准备 (1)加入相关工具包 <!-- html解析jar --> <dependenc ...
分类:编程语言   时间:2021-01-22 12:05:17    阅读次数:0
python自动化操作问题
from selenium import webdriverfrom time import sleepbro=webdriver.Chrome(executable_path='chromedriver.exe')bro.get('https://kyfw.12306.cn/otn/resourc ...
分类:编程语言   时间:2021-01-22 11:59:34    阅读次数:0
爬虫-urllib模块的使用
urllib是Python中请求url连接的官方标准库,在Python3中将Python2中的urllib和urllib2整合成了urllib。urllib中一共有四个模块,分别如下: request:主要负责构造和发起网络请求,定义了适用于在各种复杂情况下打开 URL (主要为 HTTP) 的函数 ...
分类:Web程序   时间:2021-01-15 11:56:28    阅读次数:0
python-scrapy-中间件的学习
middlewares.py class MiddlewareDownloaderMiddleware: @classmethod def from_crawler(cls, crawler): # This method is used by Scrapy to create your spide ...
分类:编程语言   时间:2021-01-14 11:23:09    阅读次数:0
Selenium
自动化测试工具,可以驱动浏览器执行特定的动作,如点击,下拉等。支持多种浏览器,爬虫中主要用来解决JavaScript渲染问题。 1.准备工作 使用之前需安装好谷歌浏览器以及ChromeDriver,以及python的第三方库Selenium 2.基本使用 broser = webdriver bro ...
分类:其他好文   时间:2021-01-14 10:44:57    阅读次数:0
selenium 点击元素的三种方法
code #follow_order_information_page_driver.get("选择非企业员工").click() #element = follow_order_information_page_driver.get("选择非企业员工") #charome.execute_scri ...
分类:其他好文   时间:2021-01-14 10:43:50    阅读次数:0
浏览器模拟手机模式操作
代码实现如下: import os from selenium import webdriver #配置浏览器以手机模式启动 chrome_options = webdriver.ChromeOptions() #选择一种存在的模式手机设备(分辨率) chrome_options.add_exper ...
分类:移动开发   时间:2021-01-13 11:26:24    阅读次数:0
selenium反爬虫设置
from selenium import webdriveroptions = webdriver.ChromeOptions()# 设置为开发者模式,防止被各大网站识别出来使用了Selenium# 屏蔽 windows.navigator.webdriveroptions.add_experime ...
分类:其他好文   时间:2021-01-13 11:25:44    阅读次数:0
如何用 Python 做自动化测试
一、Selenium 环境部署 1. window 环境部署 1.1 当前环境 Win10 64 位系统;Python3.6.2(官方已经更新到了 3.6.4) 官方下载地址:https://www.python.org/downloads Selenium 3.4.3;谷歌 59。 1.2 Pyt ...
分类:编程语言   时间:2021-01-13 11:08:49    阅读次数:0
精确比较两张图片
方式1:pillow 库 方式2:scipy 库 方式1:pillow 库 需安装:pip install pillow 1 from PIL import Image 2 from selenium import webdriver 3 4 5 class ImageCompare(object) ...
分类:其他好文   时间:2021-01-13 10:48:12    阅读次数:0
16232条   上一页 1 ... 16 17 18 19 20 ... 1624 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!