码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 2222个结果
获取网页源代码
import urllib.request response = urllib.request.urlopen("http://www.fishc.com") html = response.read() html = html.decode("utf-8") print(html) ...
分类:Web程序   时间:2017-07-23 21:10:19    阅读次数:229
《Python网络数据采集》笔记之BeautifulSoup
一 初见网络爬虫 都是使用的python3。 一个简单的例子: 在 Python 2.x 里的 urllib2 库, 在 Python 3.x 里,urllib2 改名为 urllib,被分成一些子模块:urllib.request、 urllib.parse 和 urllib.error。 二 B ...
分类:编程语言   时间:2017-07-23 18:12:54    阅读次数:225
编写易于删除,而不是易于扩展的代码
原文链接 http://programmingisterrible.com/post/139222674273/write-code-that-is-easy-to-delete-not-easy-to 翻译:马琳 校对:郭晓磊,汤涛 感谢郭晓磊同学对文章地改动。感谢汤涛叔叔的大力支持。文章在正月初 ...
分类:其他好文   时间:2017-07-22 11:59:17    阅读次数:141
python3的一个简单爬虫
#coding=utf-8 import re import urllib.request def getHtml(url): page = urllib.request.urlopen(url) html = page.read() html = html.decode('UTF-8') retu... ...
分类:编程语言   时间:2017-07-21 18:55:25    阅读次数:127
python下载图片
urlopen()括号里既可以是一个字符串也可以是一个request对象,当传入字符串的时候会转换成一个request对象,因此代码 response = urllib.request.urlopen('http://www.placekitten.com/g/500/600') 也可以写成 res ...
分类:编程语言   时间:2017-07-21 10:36:25    阅读次数:158
04python简单监控程序开发
#!/usr/bin/env python #coding:utf-8 ''' 监控监控程序 ''' import json import urllib import inspect import os,time,socket '''conf''' userDefine_check_time = 0... ...
分类:编程语言   时间:2017-07-21 10:20:30    阅读次数:166
http协议请求实战——get请求示例之抓取百度搜索关键词对应网页信息
1通过分析搜索关键词对应的网址发现字段名和内容均在网址中网址可简化为www.baidu.com/s?wd=搜索的关键词 根据分析出的规律可通过构造get请求用爬虫实现在百度上自动查询某个关键词 代码如下: ...
分类:Web程序   时间:2017-07-21 00:00:56    阅读次数:291
Robot Framework 学习(4) - 自定义Library
RobotFrame Work为我们提供了包括OS、Android、XML、FTP、HTTP、DataBase、Appium、AutoIt、Selenium、 Watir等大量的库。在使用过程中,除这些库之外,对于某些我们自己特定的应用逻辑,我们还需要开发自己的Library,以便于进行自动化测试。 ...
分类:其他好文   时间:2017-07-20 13:31:02    阅读次数:269
网络编程
怎么用python调用一个接口,或者访问一个网站,一个是urllib模块是python自带的标准包,不需要安装可以直接用,还有一个在urllib基础上开发的request模块,是第三方的,需要先安装才可以用,下面详细介绍一下,如何通过这两个模块进行URL请求。 一、urllib模块 格式二json串 ...
分类:其他好文   时间:2017-07-20 01:02:16    阅读次数:174
Bugku-一段Base64-Writeup
bugku - 一段Base64 - Writeup 题目: 分析: 本来看到题目名字和分数以为是一道水题,后来解的时候才发现有这么多编码方式,当然如果熟悉这些编码方式找在线工具解得话很快就能拿到flag,这篇writeup主要是记录一下用python实现所有解码 直接上脚本,分析过程和编码方式都在 ...
分类:其他好文   时间:2017-07-19 23:38:51    阅读次数:298
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!