码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 2222个结果
爬虫基础模块
Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 Licensed 许可证的 基于 ...
分类:其他好文   时间:2017-08-29 19:43:21    阅读次数:224
python 进阶(转自http://python.jobbole.com/82633/)
网络 通用 urllib -网络库(stdlib)。 requests -网络库。 grab – 网络库(基于pycurl)。 pycurl – 网络库(绑定libcurl)。 urllib3 – Python HTTP库,安全连接池、支持文件post、可用性高。 httplib2 – 网络库。 R ...
分类:编程语言   时间:2017-08-29 19:40:37    阅读次数:183
信息统计DashBoard踩坑总结
最近根据需求用Tornado框架在写了一个从数据库统计Redis服务器的数量、内存等信息的接口,并写了一个从接口获取数据并推送至grafana进行展示的程序。现在已经实现所有功能,现将实现过程中遇到的问题总结出来,以便后续参考。欢迎批评指正,共同学习进步!一、数据库操作中的坑..
分类:其他好文   时间:2017-08-28 23:53:29    阅读次数:251
第一个爬虫程序
from urllib import request from urllib import parse from bs4 import BeautifulSoup req =request.Request("http://www.xinshipu.com/zuofa/49391") req.add_... ...
分类:其他好文   时间:2017-08-27 17:13:27    阅读次数:218
Python 模拟淘宝登录的两种方法
方法一、urllib的post登录 方法二:通过selenium模拟浏览器登录 参考http://blog.csdn.net/u010352695/article/details/40660133 ...
分类:编程语言   时间:2017-08-26 23:32:51    阅读次数:429
Windows下 Python Selenium PhantomJS 抓取网页并截图
Windows下 Python Selenium PhantomJS 抓取网页并截图 ...
分类:编程语言   时间:2017-08-25 21:03:47    阅读次数:1267
python基础===python3 get和post请求(转载)
get请求 #encoding:UTF-8 importurllib importurllib.request data={} data['name']='aaa' url_parame=urllib.parse.urlencode(data) url="http://xxxxxx?" all_ur ...
分类:编程语言   时间:2017-08-25 00:11:17    阅读次数:217
糗事百科python爬虫
# -*- coding: utf-8 -*- #coding=utf-8 import urllib import urllib2 import re import thread import time class QSBK: def __init__(self): self.pageIndex=... ...
分类:编程语言   时间:2017-08-24 22:43:23    阅读次数:196
Python3之网络爬虫<0>初级
由于Python3合并URLib与URLlib2统一为URLlib,Python3将urlopen方法放在了urllib.request对象下。 官方文档:https://docs.python.org/3/library/urllib.request.html#module-urllib.requ ...
分类:编程语言   时间:2017-08-23 23:08:55    阅读次数:283
python 爬取网页内容
1 #encoding:UTF-8 2 import urllib 3 import urllib.request 4 import bs4 5 from bs4 import BeautifulSoup as bs 6 def test1(): 7 url = "http://www.stylus... ...
分类:编程语言   时间:2017-08-23 13:46:53    阅读次数:250
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!