graphql 是一个很不错的api 查询标准语言,已经有一个lua 的版本支持graphql 项目使用docker&&docker-compose 运行 环境准备 模块安装 luarocks install graphql docker镜像准备 模块使用luarocks 安装,默认alpine 镜 ...
<?php public function getid($dy_url){ $header=get_headers($dy_url); $str = "/^.*?(\d+).*/"; preg_match($str,$header[6],$arr); return $arr[1]; } ...
分类:
Web程序 时间:
2018-11-12 17:38:58
阅读次数:
1070
什么是爬虫?即“请求”网站并“提取”数据的“自动化”程序。 爬虫基本流程: 发起请求:通过HTTP库向目标站点发起请求,即发送一个Reques,请求可以包含额外的headers等信息,等待服务器相应。 获取相应内容:如果服务器能正常相应,会得到一个Response,Response的内容便是要获取的 ...
分类:
其他好文 时间:
2018-11-12 13:54:06
阅读次数:
228
一、选择题(含多选) 1.以下哪一项不属于浏览器Response Headers字段(B) A.Contection B.Referer C.Content-Type D.Server 2.在javascript中,以下返回true的选项是() A.typeof({}) 'object' B.typ ...
分类:
其他好文 时间:
2018-11-11 15:58:14
阅读次数:
192
在了解到cookie、session、token的作用后学习token的使用 cookie是随着url将参数发送到后台,安全性最低,并且大小受限,不超过4kb左右,它的数据保存在客户端 session数据保存在服务端,在内存中开辟空间存储数据,session文件名即sessionID保存在cooki ...
分类:
移动开发 时间:
2018-11-11 01:02:28
阅读次数:
532
转自:https://www.cnblogs.com/ranjianxi/p/7494734.html 文件信息: Content-Type:指定请求和响应的内容类型,如果未指定即为text/html 常用的Content-Type text/plain:普通文本 tex/html:html文本 a ...
分类:
Web程序 时间:
2018-11-08 18:22:39
阅读次数:
229
import urllib.request import random import re import json ''' 解决访问403的问题,需要模仿浏览器访问 ''' my_headers = [ "Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit... ...
分类:
其他好文 时间:
2018-11-08 18:10:21
阅读次数:
147
1. 报文结构 1.1 请求报文结构 Start Line 单行,包括 Method + URL + HTTP Version Headers 多行,形式为 Name:Value Body 可选,主体部分 1.2 响应报文结构 Status Line 单行,包括 HTTP Version + Sta ...
分类:
Web程序 时间:
2018-11-08 01:15:49
阅读次数:
230
把这种headers(Host: www.baidu.com)匹配成为下面这种:'Host': 'www.baidu.com 正则如下: ...
分类:
其他好文 时间:
2018-11-06 00:57:44
阅读次数:
166
前言:本文为记录工程实现过程,会引用其他文章,如果又不清晰的地方可以查看原文章。本文主旨在于记录,所以部分作者了解的部分可能不会介绍而直接操作,如果有疑问请留言或者直接使用搜索引擎。 引用: windows安装scrapy 创建第一个scrapy工程 一、安装scrapy 管理员模式打开power ...
分类:
编程语言 时间:
2018-11-05 00:04:48
阅读次数:
241