一、接口相关 数据服务商:聚合数据(https://www.juhe.cn/) API部分文档: 完整API文档下载:https://www.juhe.cn/docs/download/pdf/235 二、代码实现 view.py:(部分代码-后端逻辑) index.html:(部分代码-前端渲染页 ...
分类:
编程语言 时间:
2019-02-12 00:15:29
阅读次数:
253
解析器 解析器的作用 解析器的作用就是服务端接收客户端传过来的数据,把数据解析成自己可以处理的数据。本质就是对请求体中的数据进行解析。 请求体相关字段: Accept:指定了接收的数据类型 ContentType:指定了传递的数据类型 解析器工作原理的就是拿到请求的ContentType来判断前端给 ...
分类:
其他好文 时间:
2019-02-07 09:33:21
阅读次数:
200
import requests requests . get( ' https:/ /www. baidu. com')爬虫程序1.给定种子url,程序负责获取url的页面数据2.程序对页面数据解析解析,匹配需要的url连接,放入到队列3.重复1和2, 直到条件完成 效率 线程 协程 分布式架构 优 ...
分类:
其他好文 时间:
2019-01-30 21:45:13
阅读次数:
116
1、json数字 { "age":30 } 2、json对象 { "name":"快递6666" , "url":"www.kuidi6666.com" } 3、json数组 { "sites": [ { "name":"学习java" , "url":"www.xuexi.com" }, { "n ...
分类:
Web程序 时间:
2019-01-29 23:15:23
阅读次数:
232
从网站上获取数据然后再客户端进行解析是常见的数据交互。下面是常用的一些接口网址: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 但是我一会用到的天气查询接口是: 1 好了让我们进入正题吧。 1、第一步, ...
分类:
移动开发 时间:
2019-01-26 15:56:11
阅读次数:
178
DTCoreText 、WKWebView 、UIWebView的比较 HTML->View 数据解析: WebCore:排版引擎核心,WebCore包含主要以下模块:Loader, Parser(DOM,Render), Layout,Paint。 是脚本语言,需要逐句解析出来,然而DOM/CSS ...
分类:
Web程序 时间:
2019-01-25 17:36:29
阅读次数:
179
一,正则表达式解析 re正则就不写了,前面已经写入一篇很详细的正则表达式模块了~ 而且,在爬虫中,下面两种方式用的多一些~ 正则表达式:https://www.cnblogs.com/peng104/p/9619801.html 大致用法: 二,Xpath解析 简介及安装 简介:XPath 是一门在 ...
分类:
其他好文 时间:
2019-01-25 00:23:38
阅读次数:
176
<!-- flowchart 箭头图标 勿删 --> 最近加入了一家新公司,他们是一家电商,业务是网上虚拟充值,我进去是做OA里面的财务, 本来想到的是做一做信息管理的,没想到还涉及到去别的网站采集数据(解析Html, 最终用采集到的数据生成财务凭证)这一环,这个是我从未接触过的领域, 大致看了一下 ...
分类:
Web程序 时间:
2019-01-23 20:29:54
阅读次数:
203
正则表达式解析 常用正则表达式回顾: Xpath解析 XPath在Python的爬虫学习中,起着举足轻重的地位,对比正则表达式 re两者可以完成同样的工作,实现的功能也差不多,但XPath明显比re具有优势,在网页分析上使re退居二线。 常用xpath表达式 代码中使用xpath表达式进行数据解析 ...
分类:
其他好文 时间:
2019-01-22 23:00:46
阅读次数:
179