#!/usr/bin/envpython
#-*-coding:utf-8-*-
importurlparse
cve=‘CVE-2012-2143‘
path=‘/‘+cve+‘.html‘
cveUrl="http://cve.scap.org.cn/CVE-2015-2976.html"#URL
parsedUrl=urlparse.urlparse(cveUrl)#解构为tuple元组
printparsedUrl
urlList=list(parsedUrl)#元组转列表
..
分类：
编程语言 时间：
2015-07-27 16:46:06
阅读次数：
172
python的web相关模块，有两种不同的类型，urlparse和urllib，分别以不同的功能和兼容性来处理URL，前者主要包括urlparse()、urlunparse()和urljoin()，后者可以使用urlopen()或urlretrive()创建web客户端。urllib2模块是一个比urllib功能更加高级的模块。web开发，无疑要用到统一资源定位器URL，URL格式如下：prot_s...
分类：
编程语言 时间：
2015-06-10 14:19:32
阅读次数：
180
urlpasrse 模块提供了操作 URL 字符串的基本功能。这些功能包括 urlparse(), urlunparse()和 urljoin().urlparse()将 URL 字符串拆分成如上所描述的一些主要部件。语法结构如下:urlparse(urlstr, defProtSch=None, ...
分类：
Web程序 时间：
2015-06-02 10:52:15
阅读次数：
154
from BeautifulSoup import *
from urlparse import urljoin
ignaorewords=set(['the','of','to','and','a','in','is','it'])
我们的搜索引擎基于关键词, 所以将连词,冠词忽略
下面的代码是爬虫, 将网页的文本数据存储到我们的sqlite中, 大家看不懂也没有关系, 知道这些函...
分类：
编程语言 时间：
2015-05-25 13:07:15
阅读次数：
275
urlparse--解析(绝对和相对)URL函数:parse_qs(qs,keep_blank_values=0,strict_parsing=0)解析一个查询字符串qs:要被解析的由%编码的查询字符串keep_blank_values:标识查询字符串中空值是否应该看出空字符串，默认为False，直接忽略strict_parsing:标识解析错误时做什么。默认为..
分类：
Web程序 时间：
2015-02-05 18:43:46
阅读次数：
165
对搜索引擎、文件索引、文档转换、数据检索、站点备份或迁移等应用程序来说，经常用到对网页(即HTML文件)的解析处理。事实上，通过Python 语言提供的各种模块，我们无需借助Web服务器或者Web浏览器就能够解析和处理HTML文档。本文将详细介绍如何利用Python抓取和解析网页。首 先，我们介.....
分类：
编程语言 时间：
2014-11-06 17:19:55
阅读次数：
223
3.0版本中已经将urllib2、urlparse、和robotparser并入了urllib中，并且修改urllib模块，其中包含5个子模块，即是help()中看到的那五个名字。Python2中的urllib模块，在Python3中被修改为20.5. urllib.request — Extens...
分类：
编程语言 时间：
2014-10-29 12:47:18
阅读次数：
373
前言：urllib.parse模块按功能分为两大类：URL parsing（url解析） 和URL quoting（url引用）。一.URL parsing：主要是1.把URL字符串分割成组件2.把组件合并成url字符串1.1. urllib.parse.urlparse(urlstring, sc...
分类：
Web程序 时间：
2014-10-16 01:06:21
阅读次数：
613
bool urlparse(const u_char* data,u_int len)
{
ip_header *ih;
udp_header *uh;
tcp_header *th;
u_short sport,dport;
int ip_len = 0;
ih = (ip_header *)(data+0xE);
ip_len = (ih->ver_ihl &...
分类：
其他好文 时间：
2014-10-08 14:55:55
阅读次数：
428
urlparse分解URL 1 #!/usr/bin/env python 2 # -*- coding: utf-8 -*- 3 4 from urlparse import urlparse 5 6 url = 'http://www.baidu.com' 7 8 parsed = url...
分类：
编程语言 时间：
2014-09-13 08:17:04
阅读次数：
197
