``` import asyncio import re import typing from concurrent.futures import Executor, ThreadPoolExecutor from urllib.request import urlopen DEFAULT_EXEC... ...
分类：
其他好文 时间：
2019-06-15 18:52:47
阅读次数：
131
ajax的post方法相比get方法,在传参形式上很不一样, get把参数用'?'拼接在端口后,并且用'&'连接;而post则是需要在send参数里设置. 根据ajax实例xhr.setRequestHeader('content-type', )中第二个参数的不同, send的参数也不相同. 最常 ...
分类：
Web程序 时间：
2019-06-15 15:40:33
阅读次数：
386
把写代码过程中经常用到的一些代码段珍藏起来，下面的代码段是关于python解析远程web页面的代码。importhtmllib,urllib,formatter,sysdefparse(url,formatter):f=urllib.urlopen(url)data=f.read()f.close()p=htmllib.HTMLParser(formatter)p.feed(data)p.clos
分类：
编程语言 时间：
2019-06-12 18:05:06
阅读次数：
100
urllib库 urllib库是python中的一个基本网络请求库。用于模拟浏览器的行为，向指定服务器发送请求，并接收返回的数据。 在python3中所有的网络请求相关函数都集中在urllib.request模块下面 urlopen函数 向服务器发起请求 urlopen函数的参数 1. url 目标 ...
分类：
Web程序 时间：
2019-06-10 10:37:19
阅读次数：
115
上一篇说了请求访问的流程，这一篇说一下请求对应的源码调用 as_view 定义view dispatch dispatch initialize_request get_parsers (获取解析器） parser_context （解析上下文） get_authentitors （获取认证器） g ...
随着express升级，bodyParser从express中被分离了出来，因此，在使用express新版本的时候，需要npm install body-parser 来安装bodyParser。 在app.js中要引入bodyParser。 var bodyParser = require(‘bo ...
分类：
Web程序 时间：
2019-06-06 10:45:23
阅读次数：
125
```
# coding=utf-8 from bs4 import BeautifulSoup
import requests
import urllib
x = 1
y = 1 def crawl(url): res = requests.get(url) soup = BeautifulSou... ...
分类：
Web程序 时间：
2019-06-03 22:00:21
阅读次数：
311
```python
# coding=UTF-8
# see: https://www.cnblogs.com/victorwu/p/5762665.html
# python2.7 可用
import argparse parser = argparse.ArgumentParser(descri... ...
分类：
编程语言 时间：
2019-05-26 18:24:13
阅读次数：
134
package com.tl.spider.parser.impl; import com.tl.spider.download.WebPageDownLoadUtil; import com.tl.spider.parser.interfaces.ParseFieldsInterface; imp... ...
分类：
Web程序 时间：
2019-05-19 18:12:45
阅读次数：
146
Hive架构hive架构如图所示，client跟driver交互，通过parser、planner、optimizer，最后转为mapreduce运行，具体步骤如下driver输入一条sql，会由parser转为抽象语法树AST，这个是没有任务元数据信息的语法树；语法分析器再把AST转为一个一个的QueryBlock，一个QueryBlock包含输入、输出、计算逻辑，也就是说一个子程序就是Quer
分类：
数据库 时间：
2019-05-17 09:20:50
阅读次数：
142
